fedi-indexにおけるzephyr-orpo-141b-A35b-v0.1
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,148 ±6
パーセンタイル 18 · #240 · 暫定
人間の評価 / タスク解決
1,144 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
D 総合 1,148 [1,142–1,155] パーセンタイル 18 · #240 · 要素数:5 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,144 ±5.47 | 1,144 ±6 | 32.0% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,116 ±8.46 | 1,138 ±8 | 28.8% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,118 ±7.85 | 1,146 ±7 | 14.6% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,100 ±12 | 1,126 ±11 | 5.9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,105 ±14 | 1,125 ±13 | 5.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D コーディング 1,148 [1,132–1,164] パーセンタイル 16 · #234 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,129 ±10 | 1,140 ±9 | 87.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 数学 1,159 [1,142–1,177] パーセンタイル 17 · #212 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,148 ±11 | 1,151 ±11 | 84.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 文章作成 1,139 [1,122–1,155] パーセンタイル 18 · #220 · 要素数:2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,113 ±12 | 1,135 ±12 | 61.9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,105 ±14 | 1,125 ±13 | 28.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:繁體中文 1,128 [1,111–1,145] パーセンタイル 10 · #201 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,082 ±12 | 1,121 ±9 | 92.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:English 1,154 [1,141–1,166] パーセンタイル 21 · #217 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,174 ±6.71 | 1,150 ±7 | 92.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:Русский 1,156 [1,134–1,178] パーセンタイル 11 · #208 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,116 ±14 | 1,151 ±12 | 90.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| zephyr-orpo-141b-A35b-v0.1 | 1,148 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。