fedi-indexにおけるLlama 2 13B Chat
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,086 ±10
パーセンタイル 10 · #267
人間の評価 / タスク解決
1,091 / 1,069
人間の投票とベンチマーク、Elo-eq
コスパ
-242
100万トークンあたり$0.225、2社のプロバイダーの中央値
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
D 総合 1,086 [1,076–1,096] パーセンタイル 10 · #267 · 要素数:7
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,084 ±3.39 | 1,084 ±3 | 23.4% | 2026-11-11 | — |
| LMArena |
text/hard_prompts
|
1,051 ±5.20 | 1,080 ±5 | 22.4% | 2026-11-11 | — |
| Epoch AI |
eci
|
96.66 ±4.35 | 1,017 ±34 | 13.8% | 2023-07-18 | — |
| LMArena |
text/instruction_following
|
1,045 ±4.73 | 1,077 ±4 | 11.3% | 2026-11-11 | — |
| LMArena |
text/expert
|
1,030 ±13 | 1,092 ±10 | 8.3% | 2026-11-11 | — |
| LMArena |
text/multi_turn
|
1,050 ±7.06 | 1,081 ±6 | 5.2% | 2026-11-11 | — |
| LMArena |
text/longer_query
|
1,064 ±8.79 | 1,087 ±8 | 4.7% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D コーディング 1,096 [1,086–1,106] パーセンタイル 9 · #261 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,062 ±6.52 | 1,080 ±6 | 87.4% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 数学 1,089 [1,077–1,100] パーセンタイル 9 · #234 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,065 ±6.84 | 1,072 ±7 | 87.0% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 文章作成 1,083 [1,073–1,092] パーセンタイル 9 · #241 · 要素数:2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,047 ±6.36 | 1,067 ±6 | 63.7% | 2026-11-11 | — |
| LMArena |
text/longer_query
|
1,064 ±8.79 | 1,087 ±8 | 29.2% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:繁體中文 1,068 [1,054–1,082] パーセンタイル 4 · #211 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,001 ±9.59 | 1,057 ±8 | 92.7% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:Deutsch 1,079 [1,055–1,102] パーセンタイル 2 · #142 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/german
|
1,009 ±15 | 1,065 ±13 | 90.0% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:English 1,099 [1,092–1,107] パーセンタイル 13 · #235 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,120 ±3.93 | 1,092 ±4 | 93.7% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:Русский 1,105 [1,088–1,122] パーセンタイル 5 · #219 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,054 ±11 | 1,096 ±10 | 91.9% | 2026-11-11 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 | 2026-11 |
|---|---|---|
| Llama 2 13B Chat | 1,097 | 1,086 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。