llama-3.1-tulu-3-70b i fedi-index
Poengsummen i hvert utsnitt, hva den består av, verdi, lokal kjøring og historikk.
fedi-index · Generelt
C 1 241 ±6
Persentil 27 · #213 · foreløpig
Folk foretrekker / Løser oppgaver
1 244 / —
Menneskelige stemmer vs. benchmarks, Elo-eq
Verdi
—
På din maskinvare
Lukkede vekter: bare i skyen.
Oppdeling av poengsummen
C Generelt 1 241 [1 235–1 248] Persentil 27 · #213 · komponenter: 5 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
1 256 ±5,33 | 1 256 ±5 | 32,4% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
1 220 ±9,41 | 1 232 ±8 | 27,6% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
1 233 ±7,88 | 1 254 ±8 | 14,6% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
1 252 ±12 | 1 264 ±11 | 6,0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 224 ±13 | 1 236 ±12 | 5,7% | 2026-10-02 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
C Koding 1 230 [1 212–1 248] Persentil 25 · #208 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
1 235 ±12 | 1 235 ±11 | 86,4% | 2026-10-02 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
C Matematikk 1 235 [1 215–1 254] Persentil 28 · #184 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
1 242 ±12 | 1 242 ±12 | 83,0% | 2026-10-02 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
C Skriving 1 245 [1 228–1 261] Persentil 29 · #190 · komponenter: 2 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
1 231 ±12 | 1 256 ±13 | 59,0% | 2026-10-02 | — |
| LMArena |
text/longer_query
|
1 224 ±13 | 1 236 ±12 | 31,4% | 2026-10-02 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
C Språk: English 1 250 [1 237–1 263] Persentil 29 · #193 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
1 273 ±6,77 | 1 254 ±7 | 92,9% | 2026-10-02 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
D Språk: Русский 1 262 [1 240–1 284] Persentil 23 · #181 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/russian
|
1 246 ±14 | 1 268 ±12 | 90,5% | 2026-10-02 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
Historikk
Det samme i en tabell
| Modell | 2026-10 |
|---|---|
| llama-3.1-tulu-3-70b | 1 241 C |
Merke
Vis modellens fedi-index på nettstedet ditt eller i en README. Merket oppdaterer seg selv og lenker til denne siden.
Data CC BY 4.0: behold lenken til fedi.software.