Ir para o conteúdo
fedi.software

oasst-pythia-12b no fedi-index

A pontuação em cada categoria, do que ela é composta, custo-benefício, execução local e histórico.

fedi-index · Geral

D 961 ±7

Percentil 1 · #291 · provisório

Preferido por pessoas / Resolve tarefas

943 / —

Votos humanos vs. benchmarks, Elo-eq

Custo-benefício

—

No seu hardware

Pesos fechados: apenas na nuvem.

Decomposição da pontuação

D Geral 961 [954–968] Percentil 1 · #291 · componentes: 4 provisório
Fonte Componente Valor Elo-eq Peso Medido em Variante
LMArena text/overall 916 ±5,45 916 ±6 34,8% 2026-10-02 —
LMArena text/hard_prompts 885 ±9,47 929 ±8 29,7% 2026-10-02 —
LMArena text/instruction_following 888 ±7,93 927 ±8 15,8% 2026-10-02 —
LMArena text/multi_turn 869 ±13 917 ±12 6,2% 2026-10-02 —

O peso é a participação do componente na pontuação (o restante é o prior, que puxa modelos com poucos dados para a mediana da população). Metodologia

D Código 973 [954–992] Percentil 1 · #275 · componentes: 1 provisório
Fonte Componente Valor Elo-eq Peso Medido em Variante
LMArena text/coding 900 ±13 936 ±11 86,1% 2026-10-02 —

O peso é a participação do componente na pontuação (o restante é o prior, que puxa modelos com poucos dados para a mediana da população). Metodologia

D Matemática 953 [935–970] Percentil 1 · #253 · componentes: 1 provisório
Fonte Componente Valor Elo-eq Peso Medido em Variante
LMArena text/math 892 ±11 906 ±11 84,1% 2026-10-02 —

O peso é a participação do componente na pontuação (o restante é o prior, que puxa modelos com poucos dados para a mediana da população). Metodologia

D Escrita 964 [945–982] Percentil 1 · #265 · componentes: 1 provisório
Fonte Componente Valor Elo-eq Peso Medido em Variante
LMArena text/creative_writing 923 ±10 941 ±10 91,5% 2026-10-02 —

O peso é a participação do componente na pontuação (o restante é o prior, que puxa modelos com poucos dados para a mediana da população). Metodologia

D Idioma: 繁體中文 930 [907–953] Percentil 0 · #223 · componentes: 1 provisório
Fonte Componente Valor Elo-eq Peso Medido em Variante
LMArena text/chinese 803 ±17 900 ±13 90,0% 2026-10-02 —

O peso é a participação do componente na pontuação (o restante é o prior, que puxa modelos com poucos dados para a mediana da população). Metodologia

D Idioma: English 928 [916–940] Percentil 1 · #270 · componentes: 1 provisório
Fonte Componente Valor Elo-eq Peso Medido em Variante
LMArena text/english 945 ±5,96 908 ±6 93,2% 2026-10-02 —

O peso é a participação do componente na pontuação (o restante é o prior, que puxa modelos com poucos dados para a mediana da população). Metodologia

Histórico

fedi-index por mês
O mesmo em tabela
Modelo 2026-10
oasst-pythia-12b 961 D

Selo

Mostre o fedi-index do modelo no seu site ou em um README. O selo se atualiza sozinho e leva a esta página.

fedi-index: oasst-pythia-12b

Dados CC BY 4.0: mantenha o link para fedi.software.