Na vsebino
fedi.software

mercury v fedi-index

Ocena na vsakem področju, iz česa je sestavljena, vrednost, lokalni zagon in zgodovina.

fedi-index · Splošno

C 1.270 ±8

Percentil 30 · #206 · začasno

Ljudje raje izberejo / Rešuje naloge

1.275 / —

Človeški glasovi proti primerjalnim testom, Elo-eq

Vrednost

—

Na vaši strojni opremi

Zaprte uteži: samo v oblaku.

Razčlenitev ocene

C Splošno 1.270 [1.262–1.277] Percentil 30 · #206 · komponente: 5 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/overall 1.282 ±7,02 1.282 ±7 32,5% 2026-10-02 —
LMArena text/hard_prompts 1.284 ±9,41 1.290 ±8 29,9% 2026-10-02 —
LMArena text/instruction_following 1.238 ±13 1.260 ±12 11,9% 2026-10-02 —
LMArena text/longer_query 1.264 ±13 1.274 ±12 5,9% 2026-10-02 —
LMArena text/multi_turn 1.284 ±16 1.293 ±15 5,0% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

C Programiranje 1.296 [1.275–1.317] Percentil 32 · #188 · komponente: 1 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/coding 1.323 ±14 1.313 ±13 84,7% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

C Pisanje 1.267 [1.245–1.289] Percentil 30 · #187 · komponente: 1 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/longer_query 1.264 ±13 1.274 ±12 90,5% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

C Jezik: English 1.276 [1.256–1.295] Percentil 32 · #186 · komponente: 1 začasno
Vir Komponenta Vrednost Elo-eq Utež Izmerjeno Različica
LMArena text/english 1.300 ±11 1.282 ±11 91,2% 2026-10-02 —

Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija

Zgodovina

fedi-index po mesecih
Isto v tabeli
Model 2026-10
mercury 1.270 C

Značka

Prikažite fedi-index modela na svoji spletni strani ali v datoteki README. Značka se posodablja sama in vodi na to stran.

fedi-index: mercury

Podatki CC BY 4.0: ohranite povezavo na fedi.software.