fedi-indexにおけるgemma-2-9b-it-simpo
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,216 ±4
パーセンタイル 24 · #222 · 暫定
人間の評価 / タスク解決
1,217 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
D 総合 1,216 [1,212–1,221] パーセンタイル 24 · #222 · 要素数：6 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,227 ±3.49 | 1,227 ±4 | 27.7% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,196 ±5.77 | 1,211 ±5 | 26.1% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,191 ±5.07 | 1,215 ±5 | 13.2% | 2026-10-02 | — |
| LMArena |
text/expert
|
1,154 ±15 | 1,194 ±12 | 8.8% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,220 ±7.37 | 1,235 ±7 | 6.1% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,226 ±9.64 | 1,238 ±9 | 5.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D コーディング 1,196 [1,184–1,208] パーセンタイル 22 · #218 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,191 ±7.53 | 1,195 ±7 | 88.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 数学 1,179 [1,166–1,191] パーセンタイル 21 · #202 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,173 ±7.70 | 1,175 ±7 | 86.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
C 文章作成 1,252 [1,241–1,262] パーセンタイル 30 · #189 · 要素数：2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,239 ±7.42 | 1,264 ±8 | 63.3% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,226 ±9.64 | 1,238 ±9 | 29.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：繁體中文 1,232 [1,217–1,248] パーセンタイル 20 · #178 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,225 ±11 | 1,235 ±8 | 92.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Deutsch 1,241 [1,217–1,265] パーセンタイル 19 · #117 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/german
|
1,218 ±16 | 1,246 ±14 | 89.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
C 言語：English 1,220 [1,212–1,229] パーセンタイル 27 · #199 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,242 ±4.42 | 1,222 ±5 | 93.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Русский 1,246 [1,232–1,260] パーセンタイル 20 · #188 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,225 ±8.61 | 1,249 ±8 | 92.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| gemma-2-9b-it-simpo | 1,216 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。