fedi-indexにおけるgemini-pro-dev-api
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,147 ±4
パーセンタイル 18 · #241 · 暫定
人間の評価 / タスク解決
1,144 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
D 総合 1,147 [1,143–1,151] パーセンタイル 18 · #241 · 要素数：6 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,149 ±3.67 | 1,149 ±4 | 27.1% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,109 ±5.70 | 1,132 ±5 | 25.7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,114 ±5.33 | 1,142 ±5 | 12.9% | 2026-10-02 | — |
| LMArena |
text/expert
|
1,059 ±12 | 1,116 ±10 | 10.2% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,124 ±7.40 | 1,149 ±7 | 6.0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,132 ±8.98 | 1,150 ±8 | 5.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D コーディング 1,127 [1,116–1,138] パーセンタイル 13 · #242 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,104 ±7.01 | 1,117 ±6 | 89.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 数学 1,145 [1,133–1,156] パーセンタイル 16 · #215 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,132 ±7.06 | 1,136 ±7 | 86.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 文章作成 1,156 [1,146–1,166] パーセンタイル 19 · #218 · 要素数：2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,130 ±7.04 | 1,153 ±7 | 63.1% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,132 ±8.98 | 1,150 ±8 | 29.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：繁體中文 1,158 [1,145–1,171] パーセンタイル 12 · #196 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,124 ±8.85 | 1,155 ±7 | 92.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Deutsch 1,168 [1,145–1,192] パーセンタイル 13 · #126 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/german
|
1,124 ±15 | 1,165 ±13 | 90.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：English 1,141 [1,132–1,149] パーセンタイル 19 · #221 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,162 ±4.28 | 1,136 ±4 | 93.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Français 1,158 [1,131–1,184] パーセンタイル 6 · #127 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/french
|
1,144 ±17 | 1,152 ±15 | 88.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Русский 1,214 [1,197–1,230] パーセンタイル 15 · #200 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,186 ±10 | 1,214 ±9 | 92.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| gemini-pro-dev-api | 1,147 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。