Optimizasyon

Modelin performansını artırmak için parametrelerin amaç fonksiyonuna göre sistematik biçimde iyileştirilmesi süreci.

Optimizasyon, bir modelin öğrenme sürecindeki itici güçtür. Eğitim sırasında sistem, kayıp fonksiyonunu azaltmak veya belirli bir amaç değerini iyileştirmek için parametrelerini sürekli günceller. Bu süreç ne kadar sağlıklı işlerse model de o kadar etkili öğrenir. Ancak optimizasyon yalnızca teknik bir hesaplama problemi değildir; aynı zamanda öğrenmenin hızı, kararlılığı ve ulaştığı çözüm kalitesiyle de ilgilidir. Kötü optimize edilmiş bir model bazen iyi fikirli ama zayıf sonuçlu bir sisteme dönüşebilir. Bu yüzden optimizasyon, AI mühendisliğinde görünenden çok daha merkezi bir başlıktır.