mercury в fedi-index
Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.
fedi-index · Общий
C 1 270 ±8
Процентиль 30 · #206 · предварительно
Люди предпочитают / Решает задачи
1 275 / —
Голоса людей и бенчмарки, Elo-eq
Выгода
—
На твоём железе
Закрытые веса: только облако.
Разложение балла
C Общий 1 270 [1 262–1 277] Процентиль 30 · #206 · компонентов: 5 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1 282 ±7,02 | 1 282 ±7 | 32,5% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1 284 ±9,41 | 1 290 ±8 | 29,9% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1 238 ±13 | 1 260 ±12 | 11,9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 264 ±13 | 1 274 ±12 | 5,9% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1 284 ±16 | 1 293 ±15 | 5,0% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Код 1 296 [1 275–1 317] Процентиль 32 · #188 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1 323 ±14 | 1 313 ±13 | 84,7% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Тексты 1 267 [1 245–1 289] Процентиль 30 · #187 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/longer_query
|
1 264 ±13 | 1 274 ±12 | 90,5% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Язык: English 1 276 [1 256–1 295] Процентиль 32 · #186 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1 300 ±11 | 1 282 ±11 | 91,2% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
История
То же таблицей
| Модель | 2026-10 |
|---|---|
| mercury | 1 270 C |
Бейдж
Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.
Данные CC BY 4.0: сохраните ссылку на fedi.software.