oasst-pythia-12b v fedi-index
Ocena na vsakem področju, iz česa je sestavljena, vrednost, lokalni zagon in zgodovina.
fedi-index · Splošno
D 961 ±7
Percentil 1 · #291 · začasno
Ljudje raje izberejo / Rešuje naloge
943 / —
Človeški glasovi proti primerjalnim testom, Elo-eq
Vrednost
—
Na vaši strojni opremi
Zaprte uteži: samo v oblaku.
Razčlenitev ocene
D Splošno 961 [954–968] Percentil 1 · #291 · komponente: 4 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
916 ±5,45 | 916 ±6 | 34,8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
885 ±9,47 | 929 ±8 | 29,7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
888 ±7,93 | 927 ±8 | 15,8% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
869 ±13 | 917 ±12 | 6,2% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
D Programiranje 973 [954–992] Percentil 1 · #275 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
900 ±13 | 936 ±11 | 86,1% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
D Matematika 953 [935–970] Percentil 1 · #253 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
892 ±11 | 906 ±11 | 84,1% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
D Pisanje 964 [945–982] Percentil 1 · #265 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
923 ±10 | 941 ±10 | 91,5% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
D Jezik: 繁體中文 930 [907–953] Percentil 0 · #223 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
803 ±17 | 900 ±13 | 90,0% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
D Jezik: English 928 [916–940] Percentil 1 · #270 · komponente: 1 začasno
| Vir | Komponenta | Vrednost | Elo-eq | Utež | Izmerjeno | Različica |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
945 ±5,96 | 908 ±6 | 93,2% | 2026-10-02 | — |
Utež je delež komponente v oceni (preostanek je apriorna vrednost, ki modele z malo podatki vleče proti mediani populacije). Metodologija
Zgodovina
Isto v tabeli
| Model | 2026-10 |
|---|---|
| oasst-pythia-12b | 961 D |
Značka
Prikažite fedi-index modela na svoji spletni strani ali v datoteki README. Značka se posodablja sama in vodi na to stran.
Podatki CC BY 4.0: ohranite povezavo na fedi.software.