fedi-index의 mpt-7b-chat
분야별 점수와 그 구성, 가성비, 로컬 실행, 추이.
fedi-index · 종합
D 984 ±8
백분위 2 · #287 · 잠정
사람의 선호 / 문제 해결
967 / —
사람 투표와 벤치마크, Elo-eq
가성비
—
내 하드웨어에서
비공개 가중치: 클라우드 전용.
점수 구성
D 종합 984 [976–992] 백분위 2 · #287 · 구성 요소: 4 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
955 ±5.98 | 955 ±6 | 35.8% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
896 ±11 | 939 ±10 | 28.7% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
907 ±9.25 | 946 ±9 | 15.4% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
901 ±15 | 946 ±13 | 5.8% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 코딩 989 [966–1,012] 백분위 2 · #273 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
913 ±16 | 947 ±14 | 83.6% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 수학 979 [959–999] 백분위 2 · #251 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
919 ±13 | 932 ±12 | 82.7% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 글쓰기 998 [976–1,020] 백분위 2 · #263 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
958 ±12 | 976 ±12 | 90.5% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 언어: English 963 [951–976] 백분위 2 · #267 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
981 ±6.56 | 945 ±7 | 93.0% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
추이
표로 보기
| 모델 | 2026-10 |
|---|---|
| mpt-7b-chat | 984 D |
배지
내 사이트나 README에 모델의 fedi-index를 표시하세요. 배지는 자동으로 업데이트되며 이 페이지로 연결됩니다.
데이터는 CC BY 4.0: fedi.software 링크를 유지해 주세요.