本文へスキップ
fedi.software

fedi-indexにおけるStep 5 Preview

各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。

fedi-index · 総合

B 1,419 ±6

パーセンタイル 79 · #63 · 暫定

人間の評価 / タスク解決

1,434 / —

人間の投票とベンチマーク、Elo-eq

コスパ

+32

100万トークンあたり$1.42、7社のプロバイダーの中央値 · 公式 $1.40

手元のハードウェアで

クローズドウェイト:クラウドのみ。

スコアの内訳

B 総合 1,419 [1,413–1,425] パーセンタイル 79 · #63 · 要素数:5 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena text/overall 1,448 ±5.62 1,448 ±6 31.3% 2026-10-02 —
LMArena text/hard_prompts 1,468 ±6.99 1,456 ±6 30.3% 2026-10-02 —
LMArena text/instruction_following 1,442 ±9.33 1,453 ±9 13.2% 2026-10-02 —
LMArena text/longer_query 1,460 ±8.63 1,456 ±8 6.9% 2026-10-02 —
LMArena text/multi_turn 1,453 ±15 1,447 ±14 4.9% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

A コーディング 1,437 [1,430–1,444] パーセンタイル 88 · #34 · 要素数:2 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena webdev/overall 1,570 ±6.52 1,470 ±2 51.9% 2026-10-01 high
LMArena text/coding 1,489 ±11 1,460 ±10 37.1% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

B エージェント 1,432 [1,426–1,439] パーセンタイル 51 · #29 · 要素数:1 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena agent/overall 0.00 ±0.01 1,458 ±4 90.1% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

B ビジョン 1,434 [1,417–1,451] パーセンタイル 70 · #34 · 要素数:2 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena vision/overall 1,278 ±12 1,455 ±11 75.7% 2026-10-02 —
LMArena vision/ocr 1,297 ±15 1,468 ±14 15.2% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

B 文章作成 1,431 [1,416–1,446] パーセンタイル 79 · #56 · 要素数:2 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena text/creative_writing 1,422 ±12 1,451 ±13 54.7% 2026-10-02 —
LMArena text/longer_query 1,460 ±8.63 1,456 ±8 36.5% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

A 言語:English 1,432 [1,414–1,450] パーセンタイル 84 · #45 · 要素数:1 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena text/english 1,461 ±9.43 1,452 ±10 91.7% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

B 言語:Русский 1,425 [1,403–1,447] パーセンタイル 78 · #53 · 要素数:1 暫定
ソース 要素 値 Elo-eq 重み 測定日 バリアント
LMArena text/russian 1,447 ±14 1,449 ±12 90.4% 2026-10-02 —

重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法

推移

月別fedi-index
同じデータを表で表示
モデル 2026-10
Step 5 Preview 1,419 B

バッジ

モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。

fedi-index: Step 5 Preview

データはCC BY 4.0:fedi.softwareへのリンクを残してください。