Stemming, bir kelimeyi sonek ve öneklere ekleyen kelime köküne veya lemma olarak bilinen kelimelerin köklerine indirgeme işlemidir. Köklendirme, doğal dil anlama (NLU) ve doğal dil işlemede (NLP) önemlidir.
Örnekle NLP'de neler oluyor?
Stemming temel olarak bir kelimeden son eki çıkarmak ve onu kök kelimeye indirgemektir. Örneğin: “Uçan” bir kelimedir ve son eki “ing”dir, “Uçan” dan “ing”i çıkarırsak, “Uçmak” olan temel kelimeyi veya kök kelimeyi elde ederiz.
Stemming ne işe yarar?
Stemming, arama motorları gibi bilgi alma sistemlerinde kullanılır. Alan analizinde alan kelime hazinelerini belirlemek için kullanılır.
Lemmatization nedir?
Stemming ve lemmatization, arama motorları ve sohbet robotları tarafından bir kelimenin arkasındaki anlamı analiz etmek için kullanılan yöntemlerdir. Köklendirme, kelimenin kökünü kullanırken, lemmatization, kelimenin kullanıldığı bağlamı kullanır.
NLP'de lemmatizasyon ve köklenme nedir?
Morfolojik analiz, her kelimenin doğru lemmasının çıkarılmasını gerektirir. Örneğin, Lemmatization, bir anlamı ifade eden 'sorunlu'nun 'sorunlu' temel biçimini açıkça tanımlarken, Stemming 'ed' kısmını kesecek ve onu 'sorun'a dönüştürecektir. yanlış anlam ve yazım hataları.
