К содержимому
fedi.software

Текст

Чат-модели, ранжированные по слепому голосованию людей на LMArena, с доверительным интервалом каждого рейтинга и текущей ценой за миллион токенов.

Обновлено · Источники: LMArena, LiteLLM, models.dev

Стоимость в месяц
Тир Модель Elo Вход / выход, за 1M В месяц Контекст Приложение Сравнить
S1 4620,0015 $ / 0,09 $Бесплатно 1M
S1 4510,2088 $ / 0,4176 $ 1M
A1 4320,035 $ / 0,07 $ 1M
A1 4280,25 $ / 0,25 $ 164K
A1 4250,22 $ / 0,33 $ 164K
A1 4240,18 $ / 0,35 $ 164K
A1 4200,25 $ / 0,70 $ 128K
A1 4200,19 $ / 0,71 $ 164K
B1 3750,10 $ / 0,425 $ 164K
B1 3730,40 $ / 0,40 $ 80K
B1 356— —
B1 339— —
B1 301— —
B1 294— —
B1 291— —
C1 265— —
C1 248— —
C1 218— —
C1 2170,07 $ / 0,14 $ 16K
C1 191— 33K
C1 173— —
C1 170— —
C1 165— —
C1 158— —
C1 144— —
C1 1380,17 $ / 0,68 $ 4K
C1 132— —
C1 128— —
C1 121— —
C1 119— —
C1 119— —
C1 112— —
C1 1100,15 $ / 0,60 $ 8K
C1 108— —
C1 107— —
C1 105— —
C1 105— —
C1 101— —
C1 092— —
D1 083— —
D1 081— —
D1 080— —
D1 076— —
D1 0730,13 $ / 0,52 $ 4K
D1 069— —
D1 069— —
D1 058— —
D1 058— —
D1 054— —
D1 053— —
D1 0500,13 $ / 0,52 $ 128K
D1 042— —
D1 038— —
D1 031— —
D990— —
D955— —
D948— —
D933— —
D916— —
D894— —
D867— —
D851— —
Сравнить ()

Тиры — наши: место модели в рейтинге с учётом только тех моделей, чей доверительный интервал целиком выше её. S — лучшие 10%, A — до 30%, B — до 60%, C — до 85%, D — остальные.

Качество и цена вверх — рейтинг, вправо — смешанная цена (3 части входа : 1 выхода), USD за 1M токенов
1 000 1 200 1 400 1 600 0,01 $ 0,10 $ 1 $ 10 $ 100 $ Claude Opus 5.5 Claude Fable 5.1 Claude Opus 5

Как читать таблицу

Каждая строка — одна модель. Слева тир, наша буква от S до D. Дальше название и производитель, пометка об открытых весах, рейтинг Elo с полоской, самая низкая цена за миллион входных и выходных токенов, размер контекста, график цены за 30 дней и, если у производителя есть приложение в нашем каталоге, ссылка на скачивание.

Полоска у рейтинга — это 95% доверительный интервал. Если интервалы двух моделей пересекаются, разница между ними статистически не доказана, даже когда одна стоит в таблице выше. Щелчок по строке раскрывает подробности: провайдеры от дешёвого к дорогому, модальности, максимальный ответ, число голосов, место у источника, лицензию, дату выхода и границу знаний.

Откуда рейтинг

Основа — текстовая арена LMArena, общая категория. Посетитель пишет запрос, получает два ответа от анонимных моделей, выбирает понравившийся, и только потом видит названия. Из множества таких голосов складывается рейтинг по принципу Elo, как у шахматистов. Цены и технические данные мы берём из models.dev и LiteLLM и показываем минимальную цену среди провайдеров на день данных, в долларах.

Как присваиваются тиры

В расчёте участвуют модели, набравшие не меньше 300 голосов. Для каждой считаем, у скольких моделей весь интервал лежит выше её интервала; это число, делённое на общее количество, и есть её место. Меньше 10% — тир S, меньше 30% — A, меньше 60% — B, меньше 85% — C, остальные — D. Модели, статистически не отличимые от лидера, вместе делят S. Новинка с малым числом голосов помечена «Тир ещё не присвоен».

Что ещё есть на странице

  • Фильтры-чипы: открытые веса, бесплатные, «Низкая цена» (смешанная цена меньше 1 доллара за миллион токенов) и производители.
  • Калькулятор «Стоимость в месяц»: укажите токены в месяц и долю входных — у каждой модели появится сумма.
  • График «Качество и цена»: смешанная цена считается как 3 части входа к 1 части выхода.
  • Флажок «Сравнить» — до 4 моделей рядом.

Чего рейтинг не скажет

Голоса арены — это вкус пользователей, причём чаще на английских запросах. О скорости работы они ничего не говорят, а об узких задачах вроде юридических документов или олимпиадной математики — немного. Цена у провайдера может отличаться от прайса производителя: скидки за кэширование, пакетные запросы и региональные цены в таблице не учитываются.