... Daha fazla ->Yapay zekâ modellerinin performansı ve maliyeti nasıl karşılaştırılır?
Benchmark puanlarını ve ölçülen görev maliyetlerini aynı değerlendirme sürümü içinde karşılaştırırken her modelin akıl yürütme ayarlarını kontrol edin. Girdi/çıktı fiyatları tek başına performansı ölçmez. Eksik ölçümler bilinmiyor olarak bırakılır.
En yüksek puanlı model benim için her zaman en iyisi mi?
Hayır. Benchmark puanları belirli bir değerlendirmeyi yansıtır. Göreviniz, gecikme, akıl yürütme ayarları ve toplam maliyet seçimi değiştirebilir. Puan ve maliyet sütunlarını birlikte kullanın; koşulları görmek için benchmark kaynağını açın.
Bilinmeyen benchmark puanı modelin kötü performans gösterdiği anlamına mı gelir?
Hayır. Bu katalogda karşılaştırılabilir, doğrulanmış bir ölçüm bulunmadığı anlamına gelir. Model adına veya token fiyatına bakarak sıfır atamayız ya da puan tahmin etmeyiz. Eksik değerler ölçülen sonuçlardan ayrı tutulur.