fedi-indexにおけるstarling-lm-7b-beta
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,142 ±4
パーセンタイル 18 · #242 · 暫定
人間の評価 / タスク解決
1,138 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
D 総合 1,142 [1,138–1,146] パーセンタイル 18 · #242 · 要素数：6 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,132 ±3.72 | 1,132 ±4 | 26.7% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,118 ±5.43 | 1,141 ±5 | 25.6% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,096 ±5.09 | 1,125 ±5 | 12.8% | 2026-10-02 | — |
| LMArena |
text/expert
|
1,084 ±10 | 1,136 ±8 | 10.9% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,111 ±7.64 | 1,137 ±7 | 5.8% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,104 ±7.83 | 1,124 ±7 | 5.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D コーディング 1,157 [1,147–1,167] パーセンタイル 17 · #231 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,143 ±6.47 | 1,152 ±6 | 89.3% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 数学 1,138 [1,127–1,150] パーセンタイル 15 · #218 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,124 ±7.05 | 1,129 ±7 | 86.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 文章作成 1,126 [1,116–1,136] パーセンタイル 15 · #229 · 要素数：2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,096 ±7.32 | 1,118 ±8 | 61.7% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,104 ±7.83 | 1,124 ±7 | 31.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：繁體中文 1,150 [1,139–1,161] パーセンタイル 11 · #198 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,114 ±7.55 | 1,147 ±6 | 93.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Deutsch 1,135 [1,111–1,159] パーセンタイル 9 · #131 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/german
|
1,081 ±16 | 1,127 ±14 | 89.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：English 1,141 [1,132–1,150] パーセンタイル 20 · #220 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,162 ±4.51 | 1,136 ±5 | 93.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Русский 1,144 [1,131–1,158] パーセンタイル 9 · #213 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,103 ±8.25 | 1,140 ±7 | 92.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| starling-lm-7b-beta | 1,142 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。