fedi-indexにおけるllama-3.1-tulu-3-70b
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
C 1,241 ±6
パーセンタイル 27 · #213 · 暫定
人間の評価 / タスク解決
1,244 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
C 総合 1,241 [1,235–1,248] パーセンタイル 27 · #213 · 要素数：5 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,256 ±5.33 | 1,256 ±5 | 32.4% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,220 ±9.41 | 1,232 ±8 | 27.6% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,233 ±7.88 | 1,254 ±8 | 14.6% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,252 ±12 | 1,264 ±11 | 6.0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,224 ±13 | 1,236 ±12 | 5.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
C コーディング 1,230 [1,212–1,248] パーセンタイル 25 · #208 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,235 ±12 | 1,235 ±11 | 86.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
C 数学 1,235 [1,215–1,254] パーセンタイル 28 · #184 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,242 ±12 | 1,242 ±12 | 83.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
C 文章作成 1,245 [1,228–1,261] パーセンタイル 29 · #190 · 要素数：2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,231 ±12 | 1,256 ±13 | 59.0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,224 ±13 | 1,236 ±12 | 31.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
C 言語：English 1,250 [1,237–1,263] パーセンタイル 29 · #193 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,273 ±6.77 | 1,254 ±7 | 92.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Русский 1,262 [1,240–1,284] パーセンタイル 23 · #181 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,246 ±14 | 1,268 ±12 | 90.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| llama-3.1-tulu-3-70b | 1,241 C |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。