Besedilo

Lestvica besedilnih modelov temelji na areni LMArena, kategorija »overall«. Ljudje pošljejo poljubno vprašanje, dobijo dva anonimna odgovora in glasujejo za boljšega. Iz glasov nastane ocena po načelu Elo, ob njej pa na strani pokažemo cene, kontekst in trend cene.

Kaj pokaže vsaka vrstica

• raven in oceno z 95-odstotnim intervalom zaupanja (vodoravni pas);
• proizvajalca in oznako »Odprte uteži«, če so uteži modela javne;
• najnižjo trenutno ceno na 1 mio. vhodnih in izhodnih žetonov ter kontekstno okno;
• spremembo cene v zadnjih 30 dneh in povezavo za prenos aplikacije, če je v našem katalogu.

Klik na vrstico odpre podrobnosti: ponudnike od najcenejšega naprej, modalnosti, omejitev izhoda, število glasov, mesto pri viru, licenco, datum izdaje in mejo znanja. S potrditvenim poljem dodate model v primerjavo, v kateri so lahko hkrati do 4 modeli.

Kako brati oceno

Ko se intervala dveh modelov prekrivata, razlika med njima statistično ni jasna. Zato si lahko več modelov deli najvišjo raven, čeprav imajo nekoliko različne številke. Modeli z manj kot 300 glasovi še nimajo ravni in so označeni kot »Še brez ravni«. Ocena pove, katere odgovore uporabniki arene raje izberejo, večinoma pri vprašanjih v angleščini. Ne meri hitrosti, cene ali uspešnosti pri določeni nalogi, zato jo uporabljajte kot izhodišče, ne kot sodbo.

Cene in kalkulator

Cena je najnižja, ki smo jo na dan podatkov našli med ponudniki za ta model, v USD. Ponudnikova cena se lahko razlikuje od cene proizvajalca, popustov za predpomnjenje, paketne obdelave in regionalnih cen pa ne prikazujemo. Filter »Nizka cena« na tej lestvici pomeni mešano ceno pod 1 USD na 1 mio. žetonov; mešana cena šteje 3 dele vhoda in 1 del izhoda. Kalkulator »Strošek na mesec« izračuna strošek iz števila žetonov na mesec in deleža vhoda, graf »Kakovost in cena« pa pokaže, kateri modeli ponudijo dobro oceno za manj denarja.

Filtri in razvrščanje

Z gumbi omejite seznam na modele z odprtimi utežmi, brezplačne, poceni ali na izbranega proizvajalca. Razvrstite jih po oceni, ceni, kontekstu ali imenu. Za programiranje glejte ločeno lestvico programiranje, za brezplačni dostop pa brezplačne API-je.

Viri: ocene LMArena, cene, kontekst in modalnosti models.dev in LiteLLM.