İçeriğe geç
Kavram SözlüğüDerin Öğrenme

ELU

Negatif bölgede yumuşak üstel davranış göstererek daha dengeli aktivasyon dağılımı üretmeyi amaçlayan fonksiyon.

ELU, negatif bölgede sabit sıfırlama yerine yumuşak üstel bir yapı kullanarak aktivasyonların daha dengeli dağılmasına yardımcı olur. Bu özellik, bazı durumlarda sıfır merkezli temsillere daha yakın davranış sağlayabilir ve öğrenmeyi kolaylaştırabilir. Hesaplama açısından ReLU'dan biraz daha pahalı olsa da bazı mimarilerde daha istikrarlı optimizasyon sunabilir.