Metin Normalizasyonu

Ham metni daha tutarlı ve işlenebilir hale getirmek için yazım, biçim ve karakter düzeyinde standartlaştırma süreci.

Metin normalizasyonu, NLP boru hattının en kritik ilk adımlarından biridir. Büyük-küçük harf tutarsızlıkları, gereksiz boşluklar, farklı noktalama biçimleri, karakter varyasyonları ve sosyal medya diline özgü bozulmalar bu aşamada ele alınır. Amaç, modele giden verinin anlamsal içeriğini korurken yüzeysel gürültüyü azaltmaktır. Özellikle çok kaynaklı kurumsal veri, kullanıcı yorumu, OCR çıktısı ve sohbet verisi gibi heterojen metinlerde performansı doğrudan etkiler.