К содержимому
fedi.software

OpenAssistant Pythia 12B в fedi-index

Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.

fedi-index · Общий

D 961 ±7

Процентиль 1 · #293 · предварительно

Люди предпочитают / Решает задачи

943 / —

Голоса людей и бенчмарки, Elo-eq

Выгода

—

На твоём железе

Закрытые веса: только облако.

Разложение балла

D Общий 961 [954–967] Процентиль 1 · #293 · компонентов: 4 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/overall 916 ±5,44 916 ±5 34,8% 2026-11-11 —
LMArena text/hard_prompts 885 ±9,45 929 ±8 29,8% 2026-11-11 —
LMArena text/instruction_following 887 ±7,92 927 ±8 15,8% 2026-11-11 —
LMArena text/multi_turn 869 ±13 917 ±12 6,2% 2026-11-11 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Код 979 [961–997] Процентиль 2 · #282 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/coding 900 ±12 936 ±11 83,8% 2026-11-11 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Математика 953 [935–970] Процентиль 1 · #253 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/math 892 ±11 906 ±11 84,2% 2026-11-11 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Тексты 963 [945–982] Процентиль 2 · #259 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/creative_writing 923 ±10 941 ±10 91,5% 2026-11-11 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Язык: 繁體中文 930 [907–953] Процентиль 0 · #219 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/chinese 803 ±17 900 ±13 90,0% 2026-11-11 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Язык: English 928 [917–940] Процентиль 2 · #264 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/english 945 ±5,96 908 ±6 93,2% 2026-11-11 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

История

fedi-index по месяцам
То же таблицей
Модель 2026-11
OpenAssistant Pythia 12B 961 D

Бейдж

Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.

fedi-index: OpenAssistant Pythia 12B

Данные CC BY 4.0: сохраните ссылку на fedi.software.