fedi-indexにおけるoasst-pythia-12b
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 961 ±7
パーセンタイル 1 · #291 · 暫定
人間の評価 / タスク解決
943 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト：クラウドのみ。
スコアの内訳
D 総合 961 [954–968] パーセンタイル 1 · #291 · 要素数：4 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
916 ±5.45 | 916 ±6 | 34.8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
885 ±9.47 | 929 ±8 | 29.7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
888 ±7.93 | 927 ±8 | 15.8% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
869 ±13 | 917 ±12 | 6.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D コーディング 973 [954–992] パーセンタイル 1 · #275 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
900 ±13 | 936 ±11 | 86.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 数学 953 [935–970] パーセンタイル 1 · #253 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
892 ±11 | 906 ±11 | 84.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 文章作成 964 [945–982] パーセンタイル 1 · #265 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
923 ±10 | 941 ±10 | 91.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：繁體中文 930 [907–953] パーセンタイル 0 · #223 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
803 ±17 | 900 ±13 | 90.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
D 言語：English 928 [916–940] パーセンタイル 1 · #270 · 要素数：1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
945 ±5.96 | 908 ±6 | 93.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です（残りは事前値で、データの少ないモデルを母集団の中央値に近づけます）。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| oasst-pythia-12b | 961 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0：fedi.softwareへのリンクを残してください。