Przejdź do treści
fedi.software

starling-lm-7b-beta w fedi-index

Wynik w każdym przekroju, z czego się składa, opłacalność, uruchomienie lokalne i historia.

fedi-index · Ogólny

D 1 142 ±4

Percentyl 18 · #242 · wstępny

Ludzie wolą / Rozwiązuje zadania

1 138 / —

Głosy ludzi a benchmarki, Elo-eq

Opłacalność

—

Na twoim sprzęcie

Zamknięte wagi: tylko w chmurze.

Rozkład wyniku

D Ogólny 1 142 [1 138–1 146] Percentyl 18 · #242 · składniki: 6 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/overall 1 132 ±3,72 1 132 ±4 26,7% 2026-10-02 —
LMArena text/hard_prompts 1 118 ±5,43 1 141 ±5 25,6% 2026-10-02 —
LMArena text/instruction_following 1 096 ±5,09 1 125 ±5 12,8% 2026-10-02 —
LMArena text/expert 1 084 ±10 1 136 ±8 10,9% 2026-10-02 —
LMArena text/multi_turn 1 111 ±7,64 1 137 ±7 5,8% 2026-10-02 —
LMArena text/longer_query 1 104 ±7,83 1 124 ±7 5,7% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Programowanie 1 157 [1 147–1 167] Percentyl 17 · #231 · składniki: 1 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/coding 1 143 ±6,47 1 152 ±6 89,3% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Matematyka 1 138 [1 127–1 150] Percentyl 15 · #218 · składniki: 1 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/math 1 124 ±7,05 1 129 ±7 86,9% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Pisanie 1 126 [1 116–1 136] Percentyl 15 · #229 · składniki: 2 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/creative_writing 1 096 ±7,32 1 118 ±8 61,7% 2026-10-02 —
LMArena text/longer_query 1 104 ±7,83 1 124 ±7 31,1% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Język: 繁體中文 1 150 [1 139–1 161] Percentyl 11 · #198 · składniki: 1 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/chinese 1 114 ±7,55 1 147 ±6 93,2% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Język: Deutsch 1 135 [1 111–1 159] Percentyl 9 · #131 · składniki: 1 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/german 1 081 ±16 1 127 ±14 89,8% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Język: English 1 141 [1 132–1 150] Percentyl 20 · #220 · składniki: 1 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/english 1 162 ±4,51 1 136 ±5 93,6% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

D Język: Русский 1 144 [1 131–1 158] Percentyl 9 · #213 · składniki: 1 wstępny
Źródło Składnik Wartość Elo-eq Waga Pomiar Wariant
LMArena text/russian 1 103 ±8,25 1 140 ±7 92,8% 2026-10-02 —

Waga to udział składnika w wyniku (reszta to prior, który przyciąga modele z małą ilością danych do mediany populacji). Metodologia

Historia

fedi-index według miesięcy
To samo w tabeli
Model 2026-10
starling-lm-7b-beta 1 142 D

Odznaka

Pokaż fedi-index modelu na swojej stronie lub w README. Odznaka aktualizuje się sama i prowadzi do tej strony.

fedi-index: starling-lm-7b-beta

Dane CC BY 4.0: zachowaj link do fedi.software.