llama-3.1-tulu-3-70b в fedi-index
Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.
fedi-index · Общий
C 1 241 ±6
Процентиль 27 · #213 · предварительно
Люди предпочитают / Решает задачи
1 244 / —
Голоса людей и бенчмарки, Elo-eq
Выгода
—
На твоём железе
Закрытые веса: только облако.
Разложение балла
C Общий 1 241 [1 235–1 248] Процентиль 27 · #213 · компонентов: 5 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1 256 ±5,33 | 1 256 ±5 | 32,4% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1 220 ±9,41 | 1 232 ±8 | 27,6% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1 233 ±7,88 | 1 254 ±8 | 14,6% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1 252 ±12 | 1 264 ±11 | 6,0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 224 ±13 | 1 236 ±12 | 5,7% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Код 1 230 [1 212–1 248] Процентиль 25 · #208 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1 235 ±12 | 1 235 ±11 | 86,4% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Математика 1 235 [1 215–1 254] Процентиль 28 · #184 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1 242 ±12 | 1 242 ±12 | 83,0% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Тексты 1 245 [1 228–1 261] Процентиль 29 · #190 · компонентов: 2 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1 231 ±12 | 1 256 ±13 | 59,0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 224 ±13 | 1 236 ±12 | 31,4% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
C Язык: English 1 250 [1 237–1 263] Процентиль 29 · #193 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1 273 ±6,77 | 1 254 ±7 | 92,9% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: Русский 1 262 [1 240–1 284] Процентиль 23 · #181 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1 246 ±14 | 1 268 ±12 | 90,5% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
История
То же таблицей
| Модель | 2026-10 |
|---|---|
| llama-3.1-tulu-3-70b | 1 241 C |
Бейдж
Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.
Данные CC BY 4.0: сохраните ссылку на fedi.software.