Ofte stillede spørgsmål

Hvordan sammenlignes AI-modellers ydeevne og omkostninger?

Sammenlign benchmarkscores og målte opgaveomkostninger inden for samme evalueringsversion, og kontrollér hver models ræsonnementsindstillinger. Input-/outputpriser alene måler ikke ydeevne. Manglende målinger står som ukendte.

Er modellen med den højeste score altid bedst for mig?

Nej. Benchmarkscores beskriver en bestemt evaluering. Din opgave, latenstid, ræsonnementsindstillinger og samlede omkostninger kan ændre valget. Brug score- og omkostningskolonnerne sammen, og åbn benchmarkkilden for vilkårene.

Betyder en ukendt benchmarkscore, at en model klarer sig dårligt?

Nej. Det betyder, at der ikke findes en sammenlignelig verificeret måling i dette katalog. Vi tildeler ikke nul eller estimerer en score ud fra modelnavn eller tokenpris. Manglende værdier holdes adskilt fra målte resultater.