fedi-indexにおけるGemma 7B IT
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,077 ±12
パーセンタイル 7 · #275
人間の評価 / タスク解決
1,069 / 1,100
人間の投票とベンチマーク、Elo-eq
コスパ
-239
100万トークンあたり$0.15、1社のプロバイダーの中央値
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
D 総合 1,077 [1,065–1,088] パーセンタイル 7 · #275 · 要素数:7
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,056 ±4.86 | 1,056 ±5 | 23.2% | 2026-11-11 | — |
| LMArena |
text/hard_prompts
|
1,042 ±6.82 | 1,071 ±6 | 21.9% | 2026-11-11 | — |
| Epoch AI |
eci
|
103 ±3.72 | 1,069 ±29 | 18.6% | 2024-02-21 | — |
| LMArena |
text/instruction_following
|
1,017 ±6.49 | 1,050 ±6 | 11.0% | 2026-11-11 | — |
| LMArena |
text/expert
|
1,001 ±16 | 1,068 ±13 | 7.4% | 2026-11-11 | — |
| LMArena |
text/longer_query
|
1,021 ±11 | 1,047 ±11 | 4.3% | 2026-11-11 | — |
| LMArena |
text/multi_turn
外れ値 |
963 ±9.54 | 1,002 ±9 | 2.4% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D コーディング 1,086 [1,073–1,098] パーセンタイル 8 · #263 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,048 ±8.36 | 1,068 ±8 | 86.5% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 数学 1,091 [1,078–1,105] パーセンタイル 9 · #232 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,066 ±8.37 | 1,073 ±8 | 86.1% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 文章作成 1,057 [1,045–1,070] パーセンタイル 8 · #244 · 要素数:2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,023 ±8.97 | 1,044 ±9 | 63.0% | 2026-11-11 | — |
| LMArena |
text/longer_query
|
1,021 ±11 | 1,047 ±11 | 28.9% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:繁體中文 1,093 [1,079–1,108] パーセンタイル 6 · #206 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,036 ±10 | 1,084 ±8 | 92.6% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:English 1,070 [1,059–1,081] パーセンタイル 9 · #246 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,090 ±5.65 | 1,061 ±6 | 93.2% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:Русский 1,055 [1,036–1,074] パーセンタイル 2 · #226 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
993 ±12 | 1,041 ±11 | 91.4% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 | 2026-11 |
|---|---|---|
| Gemma 7B IT | 1,091 | 1,077 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。