fedi-indexにおけるLLaMA 13B
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 884 ±14
パーセンタイル 0 · #297
人間の評価 / タスク解決
850 / 1,032
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
D 総合 884 [870–898] パーセンタイル 0 · #297 · 要素数:4
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
834 ±7.92 | 834 ±8 | 35.2% | 2026-11-11 | — |
| LMArena |
text/hard_prompts
|
728 ±15 | 788 ±13 | 25.1% | 2026-11-11 | — |
| LMArena |
text/instruction_following
|
781 ±12 | 826 ±12 | 14.0% | 2026-11-11 | — |
| Epoch AI |
eci
|
85.42 ±5.61 | 928 ±44 | 11.6% | 2023-02-24 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D コーディング 845 [819–871] パーセンタイル 0 · #287 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
683 ±19 | 742 ±17 | 77.6% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 文章作成 857 [828–886] パーセンタイル 0 · #264 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
794 ±16 | 809 ±17 | 87.8% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:English 834 [818–851] パーセンタイル 0 · #269 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
846 ±8.61 | 803 ±9 | 92.1% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 | 2026-11 |
|---|---|---|
| LLaMA 13B | 907 | 884 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。