İçeriğe geç

Hallüsinasyonu Yakalama ve Kaynak Doğrulama

Hallüsinasyonu sıfırlayamazsın ama yakalayabilirsin. 6 teknikle Claude çıktısını doğrulamayı sistemleştir.

Şükrü Yusuf KAYA
12 dakikalık okuma
Orta
Doğrulama pipeline: iddia → kaynak → kontrol → güven

6 Doğrulama Tekniği

text
<rules>
- Her iddiaya 0.0-1.0 confidence ekle.
- Kaynak alıntısı yoksa confidence 0.5'i geçmesin.
- Tarih, sayı, alıntı içeren iddiada kaynak zorunludur.
- Bilmiyorsan: {"answer": "bilmiyorum", "needs_lookup": [...]}.
</rules>
 
<output_schema>
{
"answer": "...",
"claims": [
{"text":"...", "confidence": 0.0-1.0, "source": {"url":"...", "quote":"..."}}
],
"needs_human_review": false
}
</output_schema>
Doğrulama disiplinli prompt çıktısı.

Hallüsinasyon işaretleri#

  • Spesifik istatistik, kaynak yok
  • Çok rahat verilmiş niş alıntı
  • Gerçek olduğu iddia edilen URL parçaları
  • "[Yazar adı, Yıl]" gibi otomatik atıf görünümlü ama doğrulanamaz pasajlar
  • Yer / şirket / tarih kombinasyonlarında küçük tutarsızlık

Sağlıklı belirsizlik işaretleri#

  • "Bilmiyorum"
  • "Doğrulanması gereken"
  • Confidence < 0.7
  • "Kaynak: yok" + boş alıntı
  • "Bu konuda eğitim verim sınırlı"
Boşluk doldur · text
Hallüsinasyonu sıfırlayamazsın ama _____ . Modeli sadece senin verdiğin belgelere bağlamak _____ olarak adlandırılır. Düşük güvenli iddiaları otomatik _____ moderasyonuna yolla.
Quiz

Bu modülü değerlendirme zamanı

Buraya kadar öğrendiklerini quiz ile pekiştir. Süreli, puanlı ve geri bildirimli bir değerlendirmedir.

Quiz'e başla

Sık Sorulan Sorular

Pratik olarak hayır. RAG + kısıtlama + eval + insan moderasyon ile çok düşürülebilir; ama 0%'a inmeyi varsayma. Üretimde 'içsel hata bütçesi' olarak planla.

Yorumlar & Soru-Cevap

(0)
Yorum yazmak için giriş yap.
Yorumlar yükleniyor...

İlgili İçerikler