fedi-indexにおけるmercury
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
C 1,270 ±8
パーセンタイル 30 · #206 · 暫定
人間の評価 / タスク解決
1,275 / —
人間の投票とベンチマーク、Elo-eq
コスパ
—
手元のハードウェアで
クローズドウェイト:クラウドのみ。
スコアの内訳
C 総合 1,270 [1,262–1,277] パーセンタイル 30 · #206 · 要素数:5 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,282 ±7.02 | 1,282 ±7 | 32.5% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,284 ±9.41 | 1,290 ±8 | 29.9% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,238 ±13 | 1,260 ±12 | 11.9% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,264 ±13 | 1,274 ±12 | 5.9% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,284 ±16 | 1,293 ±15 | 5.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C コーディング 1,296 [1,275–1,317] パーセンタイル 32 · #188 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,323 ±14 | 1,313 ±13 | 84.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 文章作成 1,267 [1,245–1,289] パーセンタイル 30 · #187 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/longer_query
|
1,264 ±13 | 1,274 ±12 | 90.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 言語:English 1,276 [1,256–1,295] パーセンタイル 32 · #186 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,300 ±11 | 1,282 ±11 | 91.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| mercury | 1,270 C |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。