fedi-indexにおけるStep 3.5 Flash
各カテゴリのスコア、その内訳、コスパ、ローカル実行、推移。
fedi-index · 総合
B 1,381 ±2
パーセンタイル 59 · #121 · 暫定
人間の評価 / タスク解決
1,392 / —
人間の投票とベンチマーク、Elo-eq
コスパ
+50
100万トークンあたり$0.15、11社のプロバイダーの中央値 · 公式 $0.15
手元のハードウェアで
- GPU 12 GB #25 · IQ2_S · 高圧縮 · ≈15 tok/s
- GPU 24 GB #28 · Q2_K_L · 高圧縮 · ≈16 tok/s
- Mac 64 GB #19 · IQ1_M · 高圧縮 · ≈45 tok/s
- ユニファイドメモリ 128 GB #8 · IQ4_XS · ≈17 tok/s
スコアの内訳
B 総合 1,381 [1,380–1,383] パーセンタイル 59 · #121 · 要素数:6 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1,403 ±1.80 | 1,403 ±2 | 25.6% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1,411 ±2.18 | 1,405 ±2 | 25.5% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1,385 ±2.67 | 1,399 ±2 | 12.6% | 2026-10-02 | — |
| LMArena |
text/expert
|
1,422 ±4.31 | 1,412 ±4 | 12.3% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,402 ±2.62 | 1,403 ±2 | 6.3% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1,405 ±3.31 | 1,404 ±3 | 6.2% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B コーディング 1,393 [1,388–1,398] パーセンタイル 64 · #100 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1,436 ±2.89 | 1,413 ±3 | 90.3% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B 数学 1,377 [1,368–1,386] パーセンタイル 55 · #116 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1,408 ±5.21 | 1,401 ±5 | 87.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B 文章作成 1,379 [1,375–1,384] パーセンタイル 57 · #116 · 要素数:2 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1,357 ±3.43 | 1,385 ±4 | 62.0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1,402 ±2.62 | 1,403 ±2 | 31.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B 言語:繁體中文 1,398 [1,390–1,405] パーセンタイル 55 · #101 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
1,447 ±5.13 | 1,411 ±4 | 93.7% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B 言語:Deutsch 1,391 [1,376–1,406] パーセンタイル 51 · #71 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/german
|
1,404 ±9.58 | 1,406 ±8 | 92.5% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B 言語:English 1,394 [1,389–1,399] パーセンタイル 61 · #108 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1,417 ±2.42 | 1,406 ±3 | 94.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 言語:Español 1,402 [1,390–1,413] パーセンタイル 46 · #81 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/spanish
|
1,419 ±7.09 | 1,416 ±7 | 93.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 言語:Français 1,392 [1,380–1,405] パーセンタイル 40 · #81 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/french
|
1,421 ±7.49 | 1,406 ±7 | 93.0% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 言語:日本語 1,376 [1,360–1,393] パーセンタイル 41 · #76 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/japanese
|
1,353 ±12 | 1,391 ±9 | 92.1% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 言語:한국어 1,384 [1,370–1,397] パーセンタイル 40 · #82 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/korean
|
1,351 ±9.65 | 1,398 ±7 | 92.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
C 言語:Polski 1,384 [1,371–1,397] パーセンタイル 34 · #87 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/polish
|
1,389 ±8.27 | 1,398 ±7 | 92.9% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
B 言語:Русский 1,382 [1,376–1,388] パーセンタイル 50 · #117 · 要素数:1 暫定
| ソース | 要素 | 値 | Elo-eq | 重み | 測定日 | バリアント |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1,385 ±3.70 | 1,393 ±3 | 93.8% | 2026-10-02 | — |
重みはスコアに占める要素の割合です(残りは事前値で、データの少ないモデルを母集団の中央値に近づけます)。 算出方法
推移
同じデータを表で表示
| モデル | 2026-10 |
|---|---|
| Step 3.5 Flash | 1,381 B |
バッジ
モデルのfedi-indexをあなたのサイトやREADMEに表示できます。バッジは自動更新され、このページにリンクします。
データはCC BY 4.0:fedi.softwareへのリンクを残してください。