AI Evaluation & Quality Engineer
AI QA / Eval Specialist
AI ürününün hallucination'sını ölçen, regresyonu yakalayan QA disiplini olun.
Evaluation yeni bir meslek; 'AI test eden' QA Türkiye'de yok. Şirketler ürünü canlıya alıp şansa bırakıyor. Bu program; golden dataset tasarımından LLM-as-judge metodolojisine, RAGAS/DeepEval/Promptfoo/Phoenix araçlarından regression testing for prompts ve continuous evaluation pipeline'a kadar bütüncül QA pratiği kazandırır.
Hızlı Bakış
Şirketiniz İçin Bu Program
Yetenek Yetiştirme
İç ekiplerinizi yetiştirin, vendor ve dış kaynak bağımlılığını azaltın
Hızlı Time-to-Value
Pilot use case'ten production'a 90 gün hedefli yapı
Ölçülebilir ROI
Yetkinlik öncesi/sonrası raporu + KPI dashboard ile somut çıktı
AI Kültürü
Yöneticiden mühendise kadar tüm seviyelerde AI adoption
Teslimat Modelleri
Ekibinizin çalışma şekline en uygun teslimat
On-site
Şirket lokasyonunda yüz yüze, kapalı grup
Hibrit
Online + periyodik yüz yüze yoğun oturumlar
Tamamen Online
Canlı uzaktan + kayıttan izleme + lab notebook'ları
Train-the-Trainer
Şirket içi eğitmen yetiştirme — uzun vadeli ölçeklendirme
Şirketinize Özel Müfredat
Sektörünüz, mevzuat çerçeveniz, mevcut tech stack'iniz ve hedef use case'lerinize göre içerik özelleştirilir. Lab'lar mevcut sistemleriniz veya örnek veri seti üzerinde çalıştırılır.
Lab Ortamı
Lab oturumları şirket verisi (NDA altında), izole sandbox veya örnek veri seti üzerinde çalıştırılır
Eğitim Sonrası Destek
30 gün asenkron destek (Slack/Teams/Discord) + opsiyonel aylık follow-up oturumları + code review desteği
Niye Şimdi? — Türkiye'de Bu Boş Pazar
AI özelinde QA disiplini Türkiye'de neredeyse hiç bilinmiyor. SaaS AI ürünleri büyüdükçe bu rol kritik hale gelecek.
Program Hakkında
Hedef Ekipler
- QA mühendisleri (AI'a geçiş)
- AI mühendisleri (eval pratik)
- Test automation lead'leri
- Veri bilimciler (evaluation odaklı)
Ekibinizin Kazanımları
- Golden dataset tasarlamak ve sürdürmek
- LLM-as-judge ile pairwise ve rubric eval kurmak
- RAGAS, DeepEval, Phoenix, Promptfoo ile end-to-end eval pipeline
- Bias ve fairness testing yapmak
- Continuous evaluation'ı CI/CD'ye entegre etmek
Önkoşullar
- Python orta seviye
- LLM API'leri ile temel deneyim
- QA temelleri (avantaj)
Program İçindeki Eğitimler
12 modül / mikro eğitim
- 01
AI Evaluation Paradigması
- 02
Golden Dataset Tasarımı
- 03
LLM-as-Judge Metodolojisi
- 04
Pairwise & Rubric Tabanlı Değerlendirme
- 05
RAGAS, DeepEval, Phoenix, Promptfoo Araçları
- 06
Regression Testing for Prompts
- 07
Human Evaluation Operasyonu
- 08
Bias & Fairness Testing
- 09
Online Evaluation (A/B, Shadow)
- 10
AI Ürün Test Pyramid'i
- 11
Continuous Evaluation Pipeline
- 12
Capstone: Mevcut AI Ürününe Eval Suite Kurma
Bitirme Projesi
Gerçek bir AI ürününe golden dataset, LLM-as-judge eval, regression testing, bias testing ve CI/CD entegrasyonlu continuous eval pipeline kurma.
Çalışma Süreci
Discovery'den teslime + post-training takibe kadar
- 1
Discovery
Ücretsiz 30dk — ekip yetkinlik haritası, use case keşfi, hedef belirleme
- 2
Tasarım
Şirket use case'lerinize özel müfredat, lab senaryoları ve teslim takvimi
- 3
Teslim
Canlı eğitim + hands-on lab + capstone proje + katılım sertifikası
- 4
Takip
Yetkinlik raporu + 30 gün destek + opsiyonel aylık check-in oturumları
Kariyer Yolu
Bu programdan sonra hedefleyebileceğiniz pozisyonlar
Teknoloji Yığını & Konular
Sıkça Sorulan Sorular
Kayıt ve katılımcı seçimi nasıl yapılır?
Fiyatlandırma modeli nasıl?
Şirketimizin use case'ine özel müfredat tasarlanır mı?
On-site mi remote mu yapılıyor?
Eğitim sonrası destek dahil mi?
Sertifika veriliyor mu?
Bu program kimler için uygun?
Ne öğreneceğim?
Süresi ve formatı nedir?
Önkoşullar neler?
Bu programla hangi pozisyonlara hazırlanırım?
Bu program Türkiye'de neden gerekli?
İlgili Programlar
AI Mühendisliği Bootcamp
Üretime alınmış RAG, Agent ve LLMOps sistemleri inşa eden bir AI mühendisi olun.
LLMOps Engineer Programı
AI modellerini üretimde stabil, izlenebilir ve maliyet-verimli çalıştıran operasyon mühendisi olun.
AI Agent Architect Programı
Tek-ajan ötesi: orkestrasyon, hafıza, tool ekosistemi tasarlayan kıdemli agent mimarı olun.
Ekibinize Bu Programı Getirin
30 dakikalık ücretsiz Discovery görüşmesinde ekip yetkinlik haritanızı çıkarır, hedef use case'lerinizi keşfeder ve şirketinize özel teklif hazırlarız. Bağlayıcılık yok.