fedi-index의 fastchat-t5-3b
분야별 점수와 그 구성, 가성비, 로컬 실행, 추이.
fedi-index · 종합
D 931 ±8
백분위 0 · #292 · 잠정
사람의 선호 / 문제 해결
910 / —
사람 투표와 벤치마크, Elo-eq
가성비
—
내 하드웨어에서
비공개 가중치: 클라우드 전용.
점수 구성
D 종합 931 [924–939] 백분위 0 · #292 · 구성 요소: 4 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/overall
|
894 ±6.23 | 894 ±6 | 35.3% | 2026-10-02 | — |
| LMArena |
text/hard_prompts
|
814 ±11 | 866 ±10 | 29.5% | 2026-10-02 | — |
| LMArena |
text/instruction_following
|
858 ±9.31 | 900 ±9 | 15.4% | 2026-10-02 | — |
| LMArena |
text/multi_turn
|
853 ±16 | 902 ±14 | 5.5% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 코딩 876 [853–898] 백분위 0 · #278 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/coding
|
764 ±15 | 814 ±13 | 84.2% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 수학 934 [914–954] 백분위 0 · #255 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/math
|
862 ±13 | 877 ±13 | 82.4% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 글쓰기 946 [925–968] 백분위 1 · #266 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/creative_writing
|
902 ±12 | 920 ±12 | 90.6% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
D 언어: English 918 [905–931] 백분위 0 · #272 · 구성 요소: 1 잠정
| 소스 | 구성 요소 | 값 | Elo-eq | 가중치 | 측정일 | 변형 |
|---|---|---|---|---|---|---|
| LMArena |
text/english
|
935 ±6.78 | 896 ±7 | 92.9% | 2026-10-02 | — |
가중치는 점수에서 해당 구성 요소가 차지하는 비중입니다(나머지는 사전값으로, 데이터가 적은 모델을 모집단 중앙값 쪽으로 끌어당깁니다). 방법론
추이
표로 보기
| 모델 | 2026-10 |
|---|---|
| fastchat-t5-3b | 931 D |
배지
내 사이트나 README에 모델의 fedi-index를 표시하세요. 배지는 자동으로 업데이트되며 이 페이지로 연결됩니다.
데이터는 CC BY 4.0: fedi.software 링크를 유지해 주세요.