fedi-indexにおけるllama-3.1-tulu-3-8b
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,194 ±7
パーセンタイル 22 · #228 · 暫定
人間の評価 / タスク解決
1,193 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
D 総合 1,194 [1,187–1,200] パーセンタイル 22 · #228 · 要素数：5 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,193 ±5.35 | 1,193 ±5 | 32.8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,174 ±9.98 | 1,191 ±9 | 27.2% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,174 ±7.87 | 1,199 ±8 | 14.8% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,154 ±13 | 1,175 ±12 | 5.8% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,181 ±13 | 1,196 ±12 | 5.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D コーディング 1,190 [1,172–1,209] パーセンタイル 21 · #220 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,183 ±12 | 1,188 ±11 | 86.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 数学 1,197 [1,177–1,218] パーセンタイル 24 · #195 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,195 ±13 | 1,196 ±12 | 82.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 文章作成 1,202 [1,185–1,219] パーセンタイル 23 · #206 · 要素数：2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,182 ±13 | 1,205 ±13 | 58.9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,181 ±13 | 1,196 ±12 | 31.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：English 1,193 [1,180–1,206] パーセンタイル 25 · #206 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,215 ±6.94 | 1,192 ±7 | 92.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Русский 1,219 [1,199–1,239] パーセンタイル 16 · #196 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,193 ±13 | 1,221 ±11 | 91.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| llama-3.1-tulu-3-8b | 1,194 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。