Mercury 2 v fedi-index
Ocena na vsakem področju, iz česa je sestavljena, vrednost, lokalni zagon in zgodovina.
fedi-index · Splošno
C 1.334 ±6
Percentil 44 · #165 · začasno
Ljudje raje izberejo / Rešuje naloge
1.344 / —
Človeški glasovi proti primerjalnim testom, Elo-eq
Vrednost
−20
0,375 $ na 1M žetonov, mediana ponudnikov: 3 · proizvajalec 0,375 $
Na vaši strojni opremi
Zaprte uteži: samo v oblaku.
Razčlenitev ocene
C Splošno 1.334 [1.328–1.340] Percentil 44 · #165 · komponente: 5 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1.355 ±5,28 | 1.355 ±5 | 31,5% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1.362 ±6,78 | 1.360 ±6 | 30,3% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1.328 ±9,76 | 1.345 ±9 | 12,8% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1.329 ±9,80 | 1.334 ±9 | 6,4% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1.358 ±13 | 1.360 ±12 | 5,6% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
C Programiranje 1.346 [1.338–1.353] Percentil 42 · #163 · komponente: 2 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
webdev/overall
|
1.170 ±12 | 1.356 ±4 | 50,2% | 2026-10-01 | — |
| LMArena |
text/coding
|
1.391 ±10 | 1.373 ±9 | 38,7% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
C Pisanje 1.311 [1.296–1.327] Percentil 40 · #162 · komponente: 2 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1.288 ±13 | 1.314 ±13 | 54,9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1.329 ±9,80 | 1.334 ±9 | 35,8% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
C Jezik: English 1.353 [1.337–1.369] Percentil 46 · #147 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1.379 ±8,39 | 1.366 ±9 | 92,2% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
C Jezik: Русский 1.308 [1.286–1.331] Percentil 31 · #161 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1.303 ±14 | 1.320 ±12 | 90,4% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
Zgodovina
Isto v tabeli
| Model | 2026-10 |
|---|---|
| Mercury 2 | 1.334 C |
Značka
Prikažite fedi-index modela na svoji spletni strani ali v datoteki README. Značka se posodablja sama in vodi na to stran.
Podatki CC BY 4.0: ohranite povezavo na fedi.software.