К содержимому
fedi.software

Step 5 Preview в fedi-index

Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.

fedi-index · Общий

B 1 419 ±6

Процентиль 79 · #63 · предварительно

Люди предпочитают / Решает задачи

1 434 / —

Голоса людей и бенчмарки, Elo-eq

Выгода

+32

1,42 $ за 1M токенов, медиана 7 провайдеров · у вендора 1,40 $

На твоём железе

Закрытые веса: только облако.

Разложение балла

B Общий 1 419 [1 413–1 425] Процентиль 79 · #63 · компонентов: 5 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/overall 1 448 ±5,62 1 448 ±6 31,3% 2026-10-02 —
LMArena text/hard_prompts 1 468 ±6,99 1 456 ±6 30,3% 2026-10-02 —
LMArena text/instruction_following 1 442 ±9,33 1 453 ±9 13,2% 2026-10-02 —
LMArena text/longer_query 1 460 ±8,63 1 456 ±8 6,9% 2026-10-02 —
LMArena text/multi_turn 1 453 ±15 1 447 ±14 4,9% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

A Код 1 437 [1 430–1 444] Процентиль 88 · #34 · компонентов: 2 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena webdev/overall 1 570 ±6,52 1 470 ±2 51,9% 2026-10-01 high
LMArena text/coding 1 489 ±11 1 460 ±10 37,1% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

B Агенты 1 432 [1 426–1 439] Процентиль 51 · #29 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena agent/overall 0,00 ±0,01 1 458 ±4 90,1% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

B Зрение 1 434 [1 417–1 451] Процентиль 70 · #34 · компонентов: 2 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena vision/overall 1 278 ±12 1 455 ±11 75,7% 2026-10-02 —
LMArena vision/ocr 1 297 ±15 1 468 ±14 15,2% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

B Тексты 1 431 [1 416–1 446] Процентиль 79 · #56 · компонентов: 2 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/creative_writing 1 422 ±12 1 451 ±13 54,7% 2026-10-02 —
LMArena text/longer_query 1 460 ±8,63 1 456 ±8 36,5% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

A Язык: English 1 432 [1 414–1 450] Процентиль 84 · #45 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/english 1 461 ±9,43 1 452 ±10 91,7% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

B Язык: Русский 1 425 [1 403–1 447] Процентиль 78 · #53 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/russian 1 447 ±14 1 449 ±12 90,4% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

История

fedi-index по месяцам
То же таблицей
Модель 2026-10
Step 5 Preview 1 419 B

Бейдж

Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.

fedi-index: Step 5 Preview

Данные CC BY 4.0: сохраните ссылку на fedi.software.