Na vsebino
fedi.software

Step 5 Preview v fedi-index

Ocena na vsakem področju, iz česa je sestavljena, vrednost, lokalni zagon in zgodovina.

fedi-index · Splošno

B 1.419 ±6

Percentil 79 · #63 · začasno

Ljudje raje izberejo / Rešuje naloge

1.434 / —

Človeški glasovi proti primerjalnim testom, Elo-eq

Vrednost

+32

1,42 $ na 1M žetonov, mediana ponudnikov: 7 · proizvajalec 1,40 $

Na vaši strojni opremi

Zaprte uteži: samo v oblaku.

Razčlenitev ocene

B Splošno 1.419 [1.413–1.425] Percentil 79 · #63 · komponente: 5 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/overall 1.448 ±5,62 1.448 ±6 31,3% 2026-10-02 —
LMArena text/hard_prompts 1.468 ±6,99 1.456 ±6 30,3% 2026-10-02 —
LMArena text/instruction_following 1.442 ±9,33 1.453 ±9 13,2% 2026-10-02 —
LMArena text/longer_query 1.460 ±8,63 1.456 ±8 6,9% 2026-10-02 —
LMArena text/multi_turn 1.453 ±15 1.447 ±14 4,9% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

A Programiranje 1.437 [1.430–1.444] Percentil 88 · #34 · komponente: 2 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena webdev/overall 1.570 ±6,52 1.470 ±2 51,9% 2026-10-01 high
LMArena text/coding 1.489 ±11 1.460 ±10 37,1% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

B Agenti 1.432 [1.426–1.439] Percentil 51 · #29 · komponente: 1 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena agent/overall 0,00 ±0,01 1.458 ±4 90,1% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

B Vid 1.434 [1.417–1.451] Percentil 70 · #34 · komponente: 2 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena vision/overall 1.278 ±12 1.455 ±11 75,7% 2026-10-02 —
LMArena vision/ocr 1.297 ±15 1.468 ±14 15,2% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

B Pisanje 1.431 [1.416–1.446] Percentil 79 · #56 · komponente: 2 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/creative_writing 1.422 ±12 1.451 ±13 54,7% 2026-10-02 —
LMArena text/longer_query 1.460 ±8,63 1.456 ±8 36,5% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

A Jezik: English 1.432 [1.414–1.450] Percentil 84 · #45 · komponente: 1 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/english 1.461 ±9,43 1.452 ±10 91,7% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

B Jezik: Русский 1.425 [1.403–1.447] Percentil 78 · #53 · komponente: 1 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/russian 1.447 ±14 1.449 ±12 90,4% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

Zgodovina

fedi-index po mesecih
Isto v tabeli
Model 2026-10
Step 5 Preview 1.419 B

Značka

Prikažite fedi-index modela na svoji spletni strani ali v datoteki README. Značka se posodablja sama in vodi na to stran.

fedi-index: Step 5 Preview

Podatki CC BY 4.0: ohranite povezavo na fedi.software.