fedi-index의 OpenAssistant Pythia 12B
분야별 점수와 그 구성, 가성비, 로컬 실행, 추이.
fedi-index · 종합
D 961 ±7
백분위 1 · #293 · 잠정
사람의 선호 / 문제 해결
943 / —
사람 투표와 벤치마크, Elo-eq
가성비
—
내 하드웨어에서
비공개 가중치: 클라우드 전용.
점수 구성
D 종합 961 [954–967] 백분위 1 · #293 · 구성 요소: 4 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
916 ±5.44 | 916 ±5 | 34.8% | 2026-11-11 | — |
| LMArena |
text/hard_prompts
|
885 ±9.45 | 929 ±8 | 29.8% | 2026-11-11 | — |
| LMArena |
text/instruction_following
|
887 ±7.92 | 927 ±8 | 15.8% | 2026-11-11 | — |
| LMArena |
text/multi_turn
|
869 ±13 | 917 ±12 | 6.2% | 2026-11-11 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 코딩 979 [961–997] 백분위 2 · #282 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
900 ±12 | 936 ±11 | 83.8% | 2026-11-11 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 수학 953 [935–970] 백분위 1 · #253 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
892 ±11 | 906 ±11 | 84.2% | 2026-11-11 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 글쓰기 963 [945–982] 백분위 2 · #259 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
923 ±10 | 941 ±10 | 91.5% | 2026-11-11 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 언어: 繁體中文 930 [907–953] 백분위 0 · #219 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/chinese
|
803 ±17 | 900 ±13 | 90.0% | 2026-11-11 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 언어: English 928 [917–940] 백분위 2 · #264 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
945 ±5.96 | 908 ±6 | 93.2% | 2026-11-11 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
추이
표로 보기
| 모델 | 2026-11 |
|---|---|
| OpenAssistant Pythia 12B | 961 D |
배지
내 사이트나 README에 모델의 fedi-index를 표시하세요. 배지는 자동으로 업데이트되며 이 페이지로 연결됩니다.
데이터는 CC BY 4.0: fedi.software 링크를 유지해 주세요.