Zum Inhalt springen
fedi.software

Llama 3.1 405B Instruct (BF16) im fedi-index

Der Wert in jedem Bereich, woraus er besteht, Preis-Leistung, lokaler Betrieb und Verlauf.

fedi-index · Allgemein

C 1’268 ±8

Perzentil 31 · #205

Menschen bevorzugen / Löst Aufgaben

1’275 / 1’257

Menschliche Stimmen vs. Benchmarks, Elo-eq

Preis-Leistung

-144

$ 3.50 pro 1 Mio. Tokens, Median von 1 Anbietern

Auf deiner Hardware

Geschlossene Gewichte: nur Cloud.

Aufschlüsselung des Werts

C Allgemein 1’268 [1’261–1’276] Perzentil 31 · #205 · Komponenten: 8
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
Epoch AI eci 128 ±1.47 1’263 ±12 32.6% 2024-07-23 —
LMArena text/overall 1’284 ±1.89 1’284 ±2 17.1% 2026-11-11 bf16
LMArena text/hard_prompts 1’269 ±3.03 1’277 ±3 16.8% 2026-11-11 bf16
LMArena text/instruction_following 1’258 ±2.68 1’279 ±2 8.4% 2026-11-11 bf16
LMArena text/expert 1’243 ±5.81 1’266 ±5 7.9% 2026-11-11 —
LMArena text/multi_turn 1’297 ±3.91 1’305 ±4 4.1% 2026-11-11 bf16
LMArena text/longer_query 1’266 ±4.08 1’275 ±4 4.1% 2026-11-11 bf16
Epoch AI gpqa_diamond Alterung ×0.25 0.51 ±0.03 1’277 ±12 1.3% 2025-01-27 —

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

C Code 1’275 [1’269–1’281] Perzentil 29 · #203 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/coding 1’291 ±3.81 1’284 ±3 88.4% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

C Mathematik 1’270 [1’264–1’277] Perzentil 32 · #173 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/math 1’281 ±3.86 1’279 ±4 88.3% 2026-11-11 —

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

C Schreiben 1’278 [1’273–1’284] Perzentil 35 · #173 · Komponenten: 2 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/creative_writing 1’262 ±3.92 1’287 ±4 62.4% 2026-11-11 —
LMArena text/longer_query 1’266 ±4.08 1’275 ±4 31.4% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

D Sprache: 繁體中文 1’246 [1’237–1’254] Perzentil 23 · #168 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/chinese 1’242 ±5.64 1’248 ±4 93.6% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

D Sprache: Deutsch 1’269 [1’254–1’285] Perzentil 19 · #118 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/german 1’252 ±9.94 1’275 ±9 92.3% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

C Sprache: English 1’289 [1’285–1’294] Perzentil 36 · #172 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/english 1’312 ±2.35 1’295 ±2 94.0% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

D Sprache: Español 1’262 [1’237–1’287] Perzentil 9 · #136 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/spanish 1’260 ±15 1’269 ±14 89.3% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

D Sprache: Français 1’268 [1’242–1’293] Perzentil 11 · #126 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/french 1’279 ±16 1’275 ±14 89.3% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

D Sprache: 日本語 1’277 [1’263–1’292] Perzentil 16 · #107 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/japanese 1’208 ±11 1’283 ±8 92.6% 2026-11-11 bf16

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

D Sprache: 한국어 1’266 [1’250–1’282] Perzentil 12 · #121 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/korean 1’184 ±11 1’271 ±9 92.3% 2026-11-11 —

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

C Sprache: Русский 1’280 [1’274–1’287] Perzentil 27 · #169 · Komponenten: 1 vorläufig
Quelle Komponente Wert Elo-eq Gewicht Gemessen Variante
LMArena text/russian 1’265 ±4.04 1’286 ±4 93.8% 2026-11-11 —

Das Gewicht ist der Anteil der Komponente am Wert (der Rest ist der Prior, der Modelle mit wenig Daten zum Median der Population zieht). Methodik

Verlauf

fedi-index nach Monat
Dasselbe als Tabelle
Modell 2026-11
Llama 3.1 405B Instruct (BF16) 1’268 C

Badge

Zeige den fedi-index des Modells auf deiner Website oder in einer README. Das Badge aktualisiert sich selbst und verlinkt auf diese Seite.

fedi-index: Llama 3.1 405B Instruct (BF16)

Daten CC BY 4.0: Link zu fedi.software beibehalten.