İçeriğe geç
fedi.software

fedi-index'te Llama 3.1 405B Instruct (BF16)

Her kesitteki puan, neyden oluştuğu, fiyat/performans, yerel çalıştırma ve geçmiş.

fedi-index · Genel

C 1.268 ±8

Yüzdelik 31 · #205

İnsanlar tercih ediyor / Görevleri çözüyor

1.275 / 1.257

İnsan oyları ve benchmark'lar, Elo-eq

Fiyat/performans

-144

1M token başına $3,50, 1 sağlayıcının medyanı

Kendi donanımınızda

Kapalı ağırlıklar: yalnızca bulutta.

Puan ayrıştırması

C Genel 1.268 [1.261–1.276] Yüzdelik 31 · #205 · bileşen: 8
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
Epoch AI eci 128 ±1,47 1.263 ±12 32,6% 2024-07-23 —
LMArena text/overall 1.284 ±1,89 1.284 ±2 17,1% 2026-11-11 bf16
LMArena text/hard_prompts 1.269 ±3,03 1.277 ±3 16,8% 2026-11-11 bf16
LMArena text/instruction_following 1.258 ±2,68 1.279 ±2 8,4% 2026-11-11 bf16
LMArena text/expert 1.243 ±5,81 1.266 ±5 7,9% 2026-11-11 —
LMArena text/multi_turn 1.297 ±3,91 1.305 ±4 4,1% 2026-11-11 bf16
LMArena text/longer_query 1.266 ±4,08 1.275 ±4 4,1% 2026-11-11 bf16
Epoch AI gpqa_diamond azalma ×0,25 0,51 ±0,03 1.277 ±12 1,3% 2025-01-27 —

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

C Kodlama 1.275 [1.269–1.281] Yüzdelik 29 · #203 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/coding 1.291 ±3,81 1.284 ±3 88,4% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

C Matematik 1.270 [1.264–1.277] Yüzdelik 32 · #173 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/math 1.281 ±3,86 1.279 ±4 88,3% 2026-11-11 —

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

C Yazım 1.278 [1.273–1.284] Yüzdelik 35 · #173 · bileşen: 2 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/creative_writing 1.262 ±3,92 1.287 ±4 62,4% 2026-11-11 —
LMArena text/longer_query 1.266 ±4,08 1.275 ±4 31,4% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

D Dil: 繁體中文 1.246 [1.237–1.254] Yüzdelik 23 · #168 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/chinese 1.242 ±5,64 1.248 ±4 93,6% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

D Dil: Deutsch 1.269 [1.254–1.285] Yüzdelik 19 · #118 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/german 1.252 ±9,94 1.275 ±9 92,3% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

C Dil: English 1.289 [1.285–1.294] Yüzdelik 36 · #172 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/english 1.312 ±2,35 1.295 ±2 94,0% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

D Dil: Español 1.262 [1.237–1.287] Yüzdelik 9 · #136 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/spanish 1.260 ±15 1.269 ±14 89,3% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

D Dil: Français 1.268 [1.242–1.293] Yüzdelik 11 · #126 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/french 1.279 ±16 1.275 ±14 89,3% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

D Dil: 日本語 1.277 [1.263–1.292] Yüzdelik 16 · #107 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/japanese 1.208 ±11 1.283 ±8 92,6% 2026-11-11 bf16

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

D Dil: 한국어 1.266 [1.250–1.282] Yüzdelik 12 · #121 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/korean 1.184 ±11 1.271 ±9 92,3% 2026-11-11 —

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

C Dil: Русский 1.280 [1.274–1.287] Yüzdelik 27 · #169 · bileşen: 1 geçici
Kaynak Bileşen Değer Elo-eq Ağırlık Ölçüm Varyant
LMArena text/russian 1.265 ±4,04 1.286 ±4 93,8% 2026-11-11 —

Ağırlık, bileşenin puandaki payıdır (kalanı, az verisi olan modelleri popülasyon medyanına çeken öncüldür). Metodoloji

Geçmiş

Aylara göre fedi-index
Aynısı tablo olarak
Model 2026-11
Llama 3.1 405B Instruct (BF16) 1.268 C

Rozet

Modelin fedi-index puanını sitenizde veya bir README'de gösterin. Rozet kendini günceller ve bu sayfaya bağlantı verir.

fedi-index: Llama 3.1 405B Instruct (BF16)

Veriler CC BY 4.0: fedi.software bağlantısını koruyun.