fedi-indexにおけるLlama 2 70B SteerLM Chat
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,105 ±8
パーセンタイル 12 · #262 · 暫定
人間の評価 / タスク解決
1,097 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
D 総合 1,105 [1,097–1,112] パーセンタイル 12 · #262 · 要素数:4 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,098 ±6.35 | 1,098 ±6 | 34.9% | 2026-11-11 | — |
| LMArena |
text/hard_prompts
|
1,047 ±10 | 1,076 ±9 | 29.6% | 2026-11-11 | — |
| LMArena |
text/instruction_following
|
1,060 ±9.14 | 1,091 ±9 | 15.4% | 2026-11-11 | — |
| LMArena |
text/multi_turn
|
1,058 ±14 | 1,088 ±13 | 5.9% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D コーディング 1,074 [1,054–1,095] パーセンタイル 7 · #268 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,025 ±14 | 1,047 ±13 | 82.3% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 数学 1,101 [1,080–1,122] パーセンタイル 11 · #229 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,072 ±14 | 1,078 ±13 | 82.1% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 文章作成 1,121 [1,098–1,143] パーセンタイル 14 · #226 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,090 ±12 | 1,112 ±13 | 90.3% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:English 1,100 [1,087–1,114] パーセンタイル 13 · #233 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,120 ±6.99 | 1,092 ±7 | 92.8% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-11 |
|---|---|
| Llama 2 70B SteerLM Chat | 1,105 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。