llama-3.1-tulu-3-8b в fedi-index
Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.
fedi-index · Общий
D 1 194 ±7
Процентиль 22 · #228 · предварительно
Люди предпочитают / Решает задачи
1 193 / —
Голоса людей и бенчмарки, Elo-eq
Выгода
—
На твоём железе
Закрытые веса: только облако.
Разложение балла
D Общий 1 194 [1 187–1 200] Процентиль 22 · #228 · компонентов: 5 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1 193 ±5,35 | 1 193 ±5 | 32,8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1 174 ±9,98 | 1 191 ±9 | 27,2% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1 174 ±7,87 | 1 199 ±8 | 14,8% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1 154 ±13 | 1 175 ±12 | 5,8% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 181 ±13 | 1 196 ±12 | 5,6% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Код 1 190 [1 172–1 209] Процентиль 21 · #220 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1 183 ±12 | 1 188 ±11 | 86,2% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Математика 1 197 [1 177–1 218] Процентиль 24 · #195 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1 195 ±13 | 1 196 ±12 | 82,6% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Тексты 1 202 [1 185–1 219] Процентиль 23 · #206 · компонентов: 2 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1 182 ±13 | 1 205 ±13 | 58,9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 181 ±13 | 1 196 ±12 | 31,4% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: English 1 193 [1 180–1 206] Процентиль 25 · #206 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1 215 ±6,94 | 1 192 ±7 | 92,8% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: Русский 1 219 [1 199–1 239] Процентиль 16 · #196 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1 193 ±13 | 1 221 ±11 | 91,1% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
История
То же таблицей
| Модель | 2026-10 |
|---|---|
| llama-3.1-tulu-3-8b | 1 194 D |
Бейдж
Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.
Данные CC BY 4.0: сохраните ссылку на fedi.software.