gemini-pro-dev-api в fedi-index
Балл в каждом срезе, из чего он состоит, выгода, локальный запуск и история.
fedi-index · Общий
D 1 147 ±4
Процентиль 18 · #241 · предварительно
Люди предпочитают / Решает задачи
1 144 / —
Голоса людей и бенчмарки, Elo-eq
Выгода
—
На твоём железе
Закрытые веса: только облако.
Разложение балла
D Общий 1 147 [1 143–1 151] Процентиль 18 · #241 · компонентов: 6 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1 149 ±3,67 | 1 149 ±4 | 27,1% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1 109 ±5,70 | 1 132 ±5 | 25,7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1 114 ±5,33 | 1 142 ±5 | 12,9% | 2026-10-02 | — |
| LMArena |
text/expert
|
1 059 ±12 | 1 116 ±10 | 10,2% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1 124 ±7,40 | 1 149 ±7 | 6,0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 132 ±8,98 | 1 150 ±8 | 5,5% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Код 1 127 [1 116–1 138] Процентиль 13 · #242 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1 104 ±7,01 | 1 117 ±6 | 89,1% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Математика 1 145 [1 133–1 156] Процентиль 16 · #215 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1 132 ±7,06 | 1 136 ±7 | 86,9% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Тексты 1 156 [1 146–1 166] Процентиль 19 · #218 · компонентов: 2 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1 130 ±7,04 | 1 153 ±7 | 63,1% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 132 ±8,98 | 1 150 ±8 | 29,6% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: 繁體中文 1 158 [1 145–1 171] Процентиль 12 · #196 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1 124 ±8,85 | 1 155 ±7 | 92,9% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: Deutsch 1 168 [1 145–1 192] Процентиль 13 · #126 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/german
|
1 124 ±15 | 1 165 ±13 | 90,1% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: English 1 141 [1 132–1 149] Процентиль 19 · #221 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1 162 ±4,28 | 1 136 ±4 | 93,6% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: Français 1 158 [1 131–1 184] Процентиль 6 · #127 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/french
|
1 144 ±17 | 1 152 ±15 | 88,7% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
D Язык: Русский 1 214 [1 197–1 230] Процентиль 15 · #200 · компонентов: 1 предварительно
| Источник | Компонент | Значение | Elo-eq | Вес | Измерено | Вариант |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1 186 ±10 | 1 214 ±9 | 92,1% | 2026-10-02 | — |
Вес — доля компонента в балле (остальное — априорное значение, которое тянет модели с малым количеством данных к медиане популяции). Методика
История
То же таблицей
| Модель | 2026-10 |
|---|---|
| gemini-pro-dev-api | 1 147 D |
Бейдж
Покажите fedi-index модели на своём сайте или в README. Бейдж обновляется сам и ведёт на эту страницу.
Данные CC BY 4.0: сохраните ссылку на fedi.software.