spaCy Dasar

spaCy sentence segmentation akan membahas tentang memecah kalimat, dan menambahkan atau mengubah rule dalam sentence segmentation. Segementation standar dari spaCy akan memecah kalimat berdasarkan stop token, yaitu tanda titik. Note, doc.sents adalah generator. Segmentation dilakukan saat doc.sent dipanggil. Jadi kita tidak bisa memanggil doc.sents[index] tanpa memanggil doc.sents terlebih dahulu. Jika diperlukan untuk mengolah isi doc.sents, … Read more

spaCy Named entity recognition akan mengklasifikasikan token dengan kategori seperti person names, organization, locations, medical codes, time expression, quantities, monetary values dan lainnya. Pembahasan Code Pertama kita load library spacy dan model language yang digunakan. Lalu, kita buat fungsi untuk menampilkan isi entitas. Jika doc object memiliki entitas, maka akan ditampilkan, bila tidak maka akan … Read more

Pada lesson part of speech (POS) basic, kita akan membahas lebih jauh mengenai POS pada spaCy. Kata dalam sebuah doc object, bisa memiliki arti yang berbeda berdasarkan konteks kalimat. Oleh karena itu kita harus melihat part of speech dari kata tersebut, bukan hanya arti dari kata tersebut. spaCy memiliki 2 jenis POS POS, POS hanya … Read more

Dibandingkan dengan regular expressions pada raw text, spaCy rule based matching selain membantu mencari kata atau frase, kita juga dapat mengakses token dan relasinya. Ini berarti kita dapat mengakses dan menganalisis token-token lainnya, menggabungkan span menjadi single tokens atau menambahkan entri kedalam named entities pada doc.ents. Token Matcher Tool yang digunakan untuk rule-matching adalah Matcher. … Read more