Stopword Filtreleme

Anlamsal katkısı düşük görülen sık kelimeleri metinden çıkarmaya dayalı klasik ön işleme tekniği.

Stopword filtreleme, özellikle BoW, TF-IDF ve klasik konu modelleme gibi temsil yaklaşımlarında boyutu azaltmak için kullanılır. Ancak modern NLP'de her zaman otomatik fayda sağlamaz; çünkü bağlaçlar, olumsuzluk yapıları ve işlev sözcükleri bazı görevlerde anlam açısından kritik olabilir. Bu nedenle stopword kullanımı görev odaklı düşünülmelidir. Duygu analizi ve hukuki metinler gibi alanlarda kör filtreleme ciddi bilgi kaybı yaratabilir.