İçeriğe geç

Format Bulaşması (Format Contagion) ve Çözümleri

Few-shot örneklerinin formatına model'in 'kilitlenmesi' problemi. Tanı, ölçüm ve çözüm yöntemleri.

Şükrü Yusuf KAYA
8 dakikalık okuma
Orta

Format Contagion (Format Bulaşması)

Few-shot örnekleri stiline aşırı uyma, sezgisel olmayan ama gerçek bir problem.
text · diff modu
Senin kodun
Hedefe karşı diff
+ Çeşitli formatlı örnekler:
+ - "Hava güzel" → "Olumlu"
+ - "Yağmur yağıyor" → "Olumsuz, üzücü."
+ - "Güneşli" → "Pozitif duygu"
- Few-shot örnekleri (hepsi 3 cümle):
- - "Hava güzel" → "Olumlu. Doğa hoş. Mutlu."
- - "Yağmur yağıyor" → "Olumsuz. Islanırız. Üzücü."
- - "Güneşli" → "Olumlu. Sıcak. Keyifli."
Sorgu: "Bugün kar yağdı"
+ Modelin cevabı: "Olumlu" — esnek format, tek doğru cevap.
- Modelin cevabı: "Olumlu. Beyaz. Güzel." ← 3 cümle pattern'ini kopyaladı!
Homojen format → contagion. Çeşitli → robust.

Tespit Yöntemi#

text
1. Few-shot prompt'unla 100 sorgu çalıştır
2. Output uzunluk dağılımına bak
3. Çoğunluk aynı uzunlukta mı? → contagion var
4. Aynı kelimelerle başlıyor mu? → contagion var
5. Aynı kapanışı kullanıyor mu? ("Umarım faydalı olur") → contagion var
Format contagion teşhisi

Çözümler#

Yorumlar & Soru-Cevap

(0)
Yorum yazmak için giriş yap.
Yorumlar yükleniyor...

İlgili İçerikler