Usein kysytyt kysymykset

Miten tekoälymallien suorituskykyä ja hintaa voi verrata?

Vertaa vertailutestien tuloksia ja mitattuja tehtäväkuluja saman arviointiversion sisällä ja tarkista samalla kunkin mallin päättelyasetukset. Pelkät syöte- ja tulostehinnat eivät mittaa suorituskykyä. Puuttuvia mittaustuloksia ei arvioida.

Onko parhaat pisteet saanut malli aina minulle paras?

Ei. Vertailutestien pisteet kuvaavat tiettyä arviointia. Tehtäväsi, viive, päättelyasetukset ja kokonaiskustannus vaikuttavat valintaan. Tarkastele piste- ja hintasarakkeita yhdessä ja avaa vertailutestin lähde nähdäksesi ehdot.

Tarkoittaako tuntematon vertailutestitulos, että malli suoriutuu huonosti?

Ei. Se tarkoittaa, ettei luettelossa ole vahvistettua vertailukelpoista mittaustulosta. Emme anna nollaa emmekä arvioi tulosta mallin nimen tai tokenhinnan perusteella. Puuttuvat arvot pidetään erillään mitatuista tuloksista.