# DPO / KTO Dataset Engineering: Chosen/Rejected Triplet Üretiminin Mühendisliği

> Source: https://sukruyusufkaya.com/learn/fine-tuning-cookbook/ftc-dpo-kto-dataset-engineering
> Updated: 2026-08-16T03:23:56.757Z
> Category: Fine-Tuning Cookbook (Model-by-Model)
> Module: Part II — Tokenizer & Data Engineering
**TLDR:** DPO ve KTO için 'chosen' (iyi) ve 'rejected' (kötü) cevap çiftleri lazım. Üretim yöntemleri: AI Feedback Loop (RLAIF), regex-graded pairs (math/code), human-in-the-loop, hard-negative mining, length-controlled pairs. UltraFeedback dataset analizi, TR DPO dataset inşası, KTO'nun tek-yönlü preference avantajı.