Gyakori kérdések
Hogyan hasonlítható össze az AI-modellek teljesítménye és költsége?
Azonos értékelési verzión belül hasonlítsd össze a benchmarkpontszámokat és a mért feladatköltségeket, és ellenőrizd az egyes modellek érvelési beállításait. A bemeneti/kimeneti ár önmagában nem méri a teljesítményt. A hiányzó mérések ismeretlenek maradnak.
A legmagasabb pontszámú modell mindig a legjobb nekem?
Nem. A benchmarkpontszámok egy adott értékelést írnak le. A feladatod, a késleltetés, az érvelési beállítások és a teljes költség is befolyásolhatják a választást. Nézd együtt a pontszámot és a költséget, és ellenőrizd a benchmark feltételeit a forrásban.
A benchmark ismeretlen pontszáma azt jelenti, hogy a modell gyengén teljesít?
Nem. Azt jelenti, hogy a katalógusban nincs elérhető, ellenőrzött és összehasonlítható mérés. Nem rendelünk hozzá nullát, és nem becsüljük meg a pontszámot a modell neve vagy tokenára alapján. A hiányzó értékek külön maradnak a mért eredményektől.