OpenAssistant Pythia 12B i fedi-index
Poengsummen i hvert utsnitt, hva den består av, verdi, lokal kjøring og historikk.
fedi-index · Generelt
D 961 ±7
Persentil 1 · #293 · foreløpig
Folk foretrekker / Løser oppgaver
943 / —
Menneskelige stemmer vs. benchmarks, Elo-eq
Verdi
—
På din maskinvare
Lukkede vekter: bare i skyen.
Oppdeling av poengsummen
D Generelt 961 [954–967] Persentil 1 · #293 · komponenter: 4 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
916 ±5,44 | 916 ±5 | 34,8% | 2026-11-11 | — |
| LMArena |
text/hard_prompts
|
885 ±9,45 | 929 ±8 | 29,8% | 2026-11-11 | — |
| LMArena |
text/instruction_following
|
887 ±7,92 | 927 ±8 | 15,8% | 2026-11-11 | — |
| LMArena |
text/multi_turn
|
869 ±13 | 917 ±12 | 6,2% | 2026-11-11 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
D Koding 979 [961–997] Persentil 2 · #282 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
900 ±12 | 936 ±11 | 83,8% | 2026-11-11 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
D Matematikk 953 [935–970] Persentil 1 · #253 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
892 ±11 | 906 ±11 | 84,2% | 2026-11-11 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
D Skriving 963 [945–982] Persentil 2 · #259 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
923 ±10 | 941 ±10 | 91,5% | 2026-11-11 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
D Språk: 繁體中文 930 [907–953] Persentil 0 · #219 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
803 ±17 | 900 ±13 | 90,0% | 2026-11-11 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
D Språk: English 928 [917–940] Persentil 2 · #264 · komponenter: 1 foreløpig
| Kilde | Komponent | Verdi | Elo-eq | Vekt | Målt | Variant |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
945 ±5,96 | 908 ±6 | 93,2% | 2026-11-11 | — |
Vekt er komponentens andel av poengsummen (resten er priori-verdien som trekker modeller med lite data mot populasjonens median). Metodikk
Historikk
Det samme i en tabell
| Modell | 2026-11 |
|---|---|
| OpenAssistant Pythia 12B | 961 D |
Merke
Vis modellens fedi-index på nettstedet ditt eller i en README. Merket oppdaterer seg selv og lenker til denne siden.
Data CC BY 4.0: behold lenken til fedi.software.