Hopp til innholdet
fedi.software

starling-lm-7b-beta i fedi-index

Poengsummen i hvert utsnitt, hva den består av, verdi, lokal kjøring og historikk.

fedi-index · Generelt

D 1 142 ±4

Persentil 18 · #242 · foreløpig

Folk foretrekker / Løser oppgaver

1 138 / —

Menneskelige stemmer vs. benchmarks, Elo-eq

Verdi

—

På din maskinvare

Lukkede vekter: bare i skyen.

Oppdeling av poengsummen

D Generelt 1 142 [1 138–1 146] Persentil 18 · #242 · komponenter: 6 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/overall 1 132 ±3,72 1 132 ±4 26,7% 2026-10-02 —
LMArena text/hard_prompts 1 118 ±5,43 1 141 ±5 25,6% 2026-10-02 —
LMArena text/instruction_following 1 096 ±5,09 1 125 ±5 12,8% 2026-10-02 —
LMArena text/expert 1 084 ±10 1 136 ±8 10,9% 2026-10-02 —
LMArena text/multi_turn 1 111 ±7,64 1 137 ±7 5,8% 2026-10-02 —
LMArena text/longer_query 1 104 ±7,83 1 124 ±7 5,7% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Koding 1 157 [1 147–1 167] Persentil 17 · #231 · komponenter: 1 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/coding 1 143 ±6,47 1 152 ±6 89,3% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Matematikk 1 138 [1 127–1 150] Persentil 15 · #218 · komponenter: 1 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/math 1 124 ±7,05 1 129 ±7 86,9% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Skriving 1 126 [1 116–1 136] Persentil 15 · #229 · komponenter: 2 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/creative_writing 1 096 ±7,32 1 118 ±8 61,7% 2026-10-02 —
LMArena text/longer_query 1 104 ±7,83 1 124 ±7 31,1% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Språk: 繁體中文 1 150 [1 139–1 161] Persentil 11 · #198 · komponenter: 1 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/chinese 1 114 ±7,55 1 147 ±6 93,2% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Språk: Deutsch 1 135 [1 111–1 159] Persentil 9 · #131 · komponenter: 1 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/german 1 081 ±16 1 127 ±14 89,8% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Språk: English 1 141 [1 132–1 150] Persentil 20 · #220 · komponenter: 1 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/english 1 162 ±4,51 1 136 ±5 93,6% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

D Språk: Русский 1 144 [1 131–1 158] Persentil 9 · #213 · komponenter: 1 foreløpig
Kilde Komponent Verdi Elo-eq Vekt Målt Variant
LMArena text/russian 1 103 ±8,25 1 140 ±7 92,8% 2026-10-02 —

Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk

Historikk

fedi-index per måned
Det samme i en tabell
Modell 2026-10
starling-lm-7b-beta 1 142 D

Merke

Vis modellens fedi-index på nettstedet ditt eller i en README. Merket oppdaterer seg selv og lenker til denne siden.

fedi-index: starling-lm-7b-beta

Data CC BY 4.0: behold lenken til fedi.software.