fedi-index의 oasst-pythia-12b
분야별 점수와 그 구성, 가성비, 로컬 실행, 추이.
fedi-index · 종합
D 961 ±7
백분위 1 · #291 · 잠정
사람의 선호 / 문제 해결
943 / —
사람 투표와 벤치마크, Elo-eq
가성비
—
내 하드웨어에서
비공개 가중치: 클라우드 전용.
점수 구성
D 종합 961 [954–968] 백분위 1 · #291 · 구성 요소: 4 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
916 ±5.45 | 916 ±6 | 34.8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
885 ±9.47 | 929 ±8 | 29.7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
888 ±7.93 | 927 ±8 | 15.8% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
869 ±13 | 917 ±12 | 6.2% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 코딩 973 [954–992] 백분위 1 · #275 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
900 ±13 | 936 ±11 | 86.1% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 수학 953 [935–970] 백분위 1 · #253 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
892 ±11 | 906 ±11 | 84.1% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 글쓰기 964 [945–982] 백분위 1 · #265 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
923 ±10 | 941 ±10 | 91.5% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 언어: 繁體中文 930 [907–953] 백분위 0 · #223 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
803 ±17 | 900 ±13 | 90.0% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 언어: English 928 [916–940] 백분위 1 · #270 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
945 ±5.96 | 908 ±6 | 93.2% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
추이
표로 보기
| 모델 | 2026-10 |
|---|---|
| oasst-pythia-12b | 961 D |
배지
내 사이트나 README에 모델의 fedi-index를 표시하세요. 배지는 자동으로 업데이트되며 이 페이지로 연결됩니다.
데이터는 CC BY 4.0: fedi.software 링크를 유지해 주세요.