К содержимому
fedi.software

oasst-pythia-12b в fedi-index

Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.

fedi-index · Общий

D 961 ±7

Процентиль 1 · #291 · предварительно

Люди предпочитают / Решает задачи

943 / —

Голоса людей и бенчмарки, Elo-eq

Выгода

—

На твоём железе

Закрытые веса: только облако.

Разложение балла

D Общий 961 [954–968] Процентиль 1 · #291 · компонентов: 4 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/overall 916 ±5,45 916 ±6 34,8% 2026-10-02 —
LMArena text/hard_prompts 885 ±9,47 929 ±8 29,7% 2026-10-02 —
LMArena text/instruction_following 888 ±7,93 927 ±8 15,8% 2026-10-02 —
LMArena text/multi_turn 869 ±13 917 ±12 6,2% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Код 973 [954–992] Процентиль 1 · #275 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/coding 900 ±13 936 ±11 86,1% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Математика 953 [935–970] Процентиль 1 · #253 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/math 892 ±11 906 ±11 84,1% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Тексты 964 [945–982] Процентиль 1 · #265 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/creative_writing 923 ±10 941 ±10 91,5% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Язык: 繁體中文 930 [907–953] Процентиль 0 · #223 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/chinese 803 ±17 900 ±13 90,0% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

D Язык: English 928 [916–940] Процентиль 1 · #270 · компонентов: 1 предварительно
Источник Компонент Значение Elo-eq Вес Измерено Вариант
LMArena text/english 945 ±5,96 908 ±6 93,2% 2026-10-02 —

Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика

История

fedi-index по месяцам
То же таблицей
Модель 2026-10
oasst-pythia-12b 961 D

Бейдж

Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.

fedi-index: oasst-pythia-12b

Данные CC BY 4.0: сохраните ссылку на fedi.software.