mercury w fedi-index
Wynik w każdym przekroju, z czego się składa, opłacalność, uruchomienie lokalne i historia.
fedi-index · Ogólny
C 1 270 ±8
Percentyl 30 · #206 · wstępny
Ludzie wolą / Rozwiązuje zadania
1 275 / —
Głosy ludzi a benchmarki, Elo-eq
Opłacalność
—
Na twoim sprzęcie
Zamknięte wagi: tylko w chmurze.
Rozkład wyniku
C Ogólny 1 270 [1 262–1 277] Percentyl 30 · #206 · składniki: 5 wstępny
| Źródło | Składnik | Wartość | Elo-eq | Waga | Pomiar | Wariant |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1 282 ±7,02 | 1 282 ±7 | 32,5% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1 284 ±9,41 | 1 290 ±8 | 29,9% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1 238 ±13 | 1 260 ±12 | 11,9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 264 ±13 | 1 274 ±12 | 5,9% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1 284 ±16 | 1 293 ±15 | 5,0% | 2026-10-02 | — |
Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia
C Programowanie 1 296 [1 275–1 317] Percentyl 32 · #188 · składniki: 1 wstępny
| Źródło | Składnik | Wartość | Elo-eq | Waga | Pomiar | Wariant |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1 323 ±14 | 1 313 ±13 | 84,7% | 2026-10-02 | — |
Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia
C Pisanie 1 267 [1 245–1 289] Percentyl 30 · #187 · składniki: 1 wstępny
| Źródło | Składnik | Wartość | Elo-eq | Waga | Pomiar | Wariant |
|---|---|---|---|---|---|---|
| LMArena |
text/longer_query
|
1 264 ±13 | 1 274 ±12 | 90,5% | 2026-10-02 | — |
Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia
C Język: English 1 276 [1 256–1 295] Percentyl 32 · #186 · składniki: 1 wstępny
| Źródło | Składnik | Wartość | Elo-eq | Waga | Pomiar | Wariant |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1 300 ±11 | 1 282 ±11 | 91,2% | 2026-10-02 | — |
Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia
Historia
To samo w tabeli
| Model | 2026-10 |
|---|---|
| mercury | 1 270 C |
Odznaka
Pokaż fedi-index modelu na swojej stronie lub w README. Odznaka aktualizuje się sama i prowadzi do tej strony.
Dane CC BY 4.0: zachowaj link do fedi.software.