fedi-indexにおけるmpt-7b-chat
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
D 984 ±8
パーセンタイル 2 · #287 · 暫定
人間の評価 / タスク解決
967 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
D 総合 984 [976–992] パーセンタイル 2 · #287 · 要素数:4 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
955 ±5.98 | 955 ±6 | 35.8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
896 ±11 | 939 ±10 | 28.7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
907 ±9.25 | 946 ±9 | 15.4% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
901 ±15 | 946 ±13 | 5.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D コーディング 989 [966–1,012] パーセンタイル 2 · #273 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
913 ±16 | 947 ±14 | 83.6% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 数学 979 [959–999] パーセンタイル 2 · #251 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
919 ±13 | 932 ±12 | 82.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 文章作成 998 [976–1,020] パーセンタイル 2 · #263 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
958 ±12 | 976 ±12 | 90.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
D 言語:English 963 [951–976] パーセンタイル 2 · #267 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
981 ±6.56 | 945 ±7 | 93.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| mpt-7b-chat | 984 D |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。