fedi-indexにおけるstarling-lm-7b-alpha
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 1,116 ±5
パーセンタイル 14 · #252 · 暫定
人間の評価 / タスク解決
1,110 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
D 総合 1,116 [1,112–1,121] パーセンタイル 14 · #252 · 要素数：6 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,108 ±4.04 | 1,108 ±4 | 28.0% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,075 ±6.38 | 1,102 ±6 | 26.2% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,070 ±5.76 | 1,100 ±6 | 13.2% | 2026-10-02 | — |
| LMArena |
text/expert
|
1,033 ±16 | 1,094 ±13 | 8.7% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,085 ±8.86 | 1,113 ±8 | 5.8% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,081 ±12 | 1,103 ±11 | 5.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D コーディング 1,122 [1,109–1,135] パーセンタイル 12 · #244 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,098 ±8.27 | 1,112 ±7 | 88.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 数学 1,103 [1,090–1,116] パーセンタイル 9 · #231 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,081 ±7.96 | 1,088 ±8 | 86.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 文章作成 1,122 [1,111–1,134] パーセンタイル 14 · #232 · 要素数：2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,099 ±7.81 | 1,121 ±8 | 64.8% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,081 ±12 | 1,103 ±11 | 27.4% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：繁體中文 1,101 [1,085–1,116] パーセンタイル 6 · #209 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,045 ±11 | 1,092 ±9 | 92.3% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：English 1,118 [1,109–1,127] パーセンタイル 15 · #232 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,139 ±4.57 | 1,112 ±5 | 93.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：Русский 1,140 [1,118–1,162] パーセンタイル 9 · #214 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,096 ±14 | 1,133 ±12 | 90.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| starling-lm-7b-alpha | 1,116 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。