Metin — fedi.software

Sıralama nasıl oluşuyor?

Metin modelleri tablosu, LMArena'nın metin arenasındaki genel kategoriden gelir. Yöntem basittir: bir kişi bir istem yazar, adı gizli iki modelden iki yanıt alır ve beğendiğine oy verir. Binlerce karşılaşmadan Elo tarzı bir puan çıkar. Biz her modele güncel fiyatı, bağlam penceresini ve kendi seviyemizi ekleriz.

Seviye kuralı açıktır. Yalnızca en az 300 oy almış modeller hesaba katılır; diğerleri «Henüz seviye yok» olarak görünür. Bir modelin sırası, %95 güven aralığının tamamı onun üstünde kalan model sayısına bir eklenerek bulunur. Sıra toplam modele bölünür: %10'un altı S, %30'a kadar A, %60'a kadar B, %85'e kadar C, gerisi D.

Satırda neler görürsünüz?

seviye ve çubuk olarak çizilmiş %95 güven aralığıyla puan;
geliştirici ve model indirilebiliyorsa «Açık ağırlıklar» işareti;
sağlayıcılar arasında bulduğumuz en düşük 1M token girdi ve çıktı fiyatı, USD olarak;
bağlam penceresi ve 30 günlük fiyat değişimi;
uygulama kataloğumuzdaysa indirme bağlantısı.

Çubuklar neden önemli?

İki modelin çubukları üst üste biniyorsa aralarındaki fark istatistiksel olarak net değildir. Bu yüzden puanları aynı olmayan birkaç model S seviyesini paylaşabilir. Tek bir sayıya değil, çubuğun genişliğine ve komşularıyla örtüşmesine bakın.

Fiyat, hesaplayıcı ve grafik

Fiyat, verinin alındığı gün sağlayıcılar arasındaki en düşük değerdir. Geliştiricinin kendi fiyatından farklı olabilir; önbellek, toplu işlem indirimleri ve bölgesel fiyatlar gösterilmez. «Düşük fiyat» etiketi, karma fiyatı 1M token başına 1 USD'nin altında olan modellere verilir.

Tablonun altındaki «Aylık maliyet» hesaplayıcısına aylık token miktarınızı ve girdinin payını yazarsınız, her modelin tahmini maliyetini görürsünüz. «Kalite ve fiyat» grafiği dikeyde puanı, yatayda 3 birim girdi : 1 birim çıktı oranıyla karma fiyatı gösterir. Filtrelerle açık ağırlıklı, ücretsiz, ucuz ya da belirli bir geliştiricinin modellerini ayırabilir, satırdaki kutucukla en fazla 4 modeli karşılaştırabilirsiniz.

Tablonun ölçmediği şeyler

Puan, çoğunlukla İngilizce istemler gönderen arena kullanıcılarının tercihini yansıtır. Hızı, maliyeti ya da belirli bir görevdeki başarıyı ölçmez. Kod yazıyorsanız kodlama tablosuna, ücretsiz API arıyorsanız ücretsiz modellere de bakın.

Seviye	Elo	Girdi / çıktı, 1 milyon başına	Bağlam
S	1.533	—	—
S	1.512	$4 / $20	1M
S	1.511	$10 / $50	1M
S	1.507	$5 / $25	1M
S	1.503	$4,30 / $21	1M
S	1.497	$0,75 / $3,75	1M
S	1.492	$3 / $18,50	1M
S	1.491	$0,40 / $0,80	1M
S	1.490	$4,30 / $21	1M
S	1.490	$0,10 / $0,20	1M
S	1.487	$0,75 / $3,75	1M
S	1.483	$0,10 / $0,20	1M
S	1.482	$0,338 / $1,01	1M
S	1.482	$0,1857 / $1,11	1M
S	1.480	$1 / $6	1M
S	1.479	$0,375 / $1,88	1M
S	1.479	$0,57 / $3,43	1M
S	1.479	$1,25 / $4,25	1M
S	1.476	$1 / $4Ücretsiz	1M
S	1.476	$0,825 / $2,48	1M
S	1.474	—	—
S	1.471	$0,40 / $1,40Ücretsiz	1M
S	1.471	$1,50 / $12	1M
S	1.470	—	—
S	1.470	$0,30 / $1,05Ücretsiz	1M
S	1.470	$0,03 / $0,10Ücretsiz	1M
S	1.469	$0,75 / $6	1M
S	1.468	$0,5634 / $2,54	119K
S	1.467	$2 / $10	1M
S	1.466	$0,07 / $0,43	1M
S	1.465	$0,40 / $0,80	1M
S	1.462	$0,0015 / $0,09Ücretsiz	1M
S	1.461	$0,45 / $2,15	200K
S	1.461	$0,425 / $2,12	1M
S	1.458	$0,87 / $7	1M
S	1.458	$0,90 / $5,55	1M
S	1.456	$0,10 / $0,25	1M
S	1.456	$2 / $10	1M
S	1.455	$0,275 / $1,10Ücretsiz	262K
S	1.455	$0,282 / $1,13	1M
S	1.451	$0,2088 / $0,4176	1M
A	1.451	$0,71 / $3,57	200K
S	1.451	$1,25 / $2,50	1M
A	1.450	$1,25 / $2,50	1M
S	1.449	—	—
A	1.448	$0,50 / $3	131K
A	1.448	$2 / $6	500K
S	1.448	$0,959 / $2,74	1M
S	1.447	$1,03 / $6,16	262K
A	1.446	$1,50 / $2	1M
A	1.446	$0,40 / $1,75	205K
S	1.446	$2 / $10	1M
A	1.445	$0,30 / $1,90	262K
A	1.445	$0,10 / $0,10	1M
A	1.445	—	—
A	1.444	$1,25 / $2,50	2M
A	1.443	$0,10 / $0,25Ücretsiz	262K
A	1.443	$1,44 / $7,20	1M
A	1.443	$1 / $8	400K
A	1.442	$8 / $40	1M
A	1.442	$0,95 / $4,05Ücretsiz	262K
A	1.441	$0,066 / $0,26	262K
A	1.441	$0,045 / $0,32	262K
A	1.440	$0,2740 / $1,10	205K
A	1.439	$0,36 / $1,43	262K
A	1.439	$0,43 / $2,14	1M
A	1.439	$0,25 / $2	128K
A	1.438	$0,1644 / $0,9864Ücretsiz	262K
A	1.437	$0,7042 / $3,10	200K
A	1.437	$0,276 / $1,65	1M
A	1.437	$2 / $10	200K
A	1.436	$0,435 / $0,87	1M
A	1.436	$0,2740 / $1,10	205K
A	1.435	$0,15 / $1,25	1M
A	1.434	$0,042 / $0,22Ücretsiz	262K
A	1.432	$0,035 / $0,07	1M
A	1.432	$0,20 / $0,90Ücretsiz	1M
A	1.431	$0,06 / $0,37	1M
A	1.430	$0,286 / $1,14	131K
A	1.429	$4,50 / $14	128K
A	1.428	$0,25 / $0,25	164K
A	1.428	$0,50 / $1,50	262K
A	1.428	$0,14 / $0,28	1M
A	1.427	$1,25 / $6	500K
A	1.427	—	131K
A	1.426	$3 / $15	131K
A	1.425	$0,22 / $0,33	164K
A	1.424	$0,18 / $0,35	164K
A	1.424	$0,40 / $2	262K
A	1.423	$0,14 / $0,28	262K
A	1.421	$1,50 / $7,50	256K
A	1.420	—	—
A	1.420	$0,25 / $0,70	128K
A	1.420	$0,20 / $0,88	131K
A	1.420	$0,19 / $0,71	164K
A	1.419	$0,09 / $0,55	131K
A	1.419	$13 / $64	197K
A	1.417	$75 / $150	128K
A	1.417	$0,144 / $0,574Ücretsiz	131K
A	1.417	$0,1126 / $0,9008Ücretsiz	262K
A	1.417	$0,09 / $0,71	1M
A	1.416	$0,125 / $0,75	1M
A	1.415	$0,11 / $0,60	131K
A	1.414	$1,15 / $8	262K
A	1.414	$0,45 / $1,20	524K
A	1.411	$0,375 / $4	400K
A	1.411	$2,70 / $13,50	256K
A	1.411	$0,10 / $0,30	262K
A	1.410	$1,80 / $7,20	200K
A	1.409	$0,0846 / $0,6768	262K
A	1.407	$0,30 / $2,50	1M
A	1.406	—	—
A	1.406	$1 / $8	400K
A	1.405	$0,08 / $0,32Ücretsiz	205K
B	1.403	$0,09 / $0,30Ücretsiz	256K
A	1.401	—	—
B	1.401	$0,287 / $2,87	131K
A	1.401	—	131K
B	1.400	$1,60 / $4,80	500K
B	1.397	$0,0282 / $0,282	1M
B	1.397	$1,25 / $2,50	1M
B	1.396	$0,14 / $0,71	200K
B	1.395	$1,60 / $8	1M
B	1.394	$0,0564 / $0,4512	262K
B	1.392	$0,27 / $1,10	205K
B	1.391	$0,08 / $0,40	1M
B	1.389	—	—
B	1.389	$1,75 / $14	128K
B	1.386	$0,03 / $0,12	524K
B	1.384	$0,09 / $0,30	256K
B	1.384	$0,1165 / $0,2911	131K
B	1.383	$1,60 / $6,40	1M
B	1.380	$0,40 / $1,80	256K
B	1.379	$0,09 / $0,36	1M
B	1.378	$0,05 / $0,25	262K
B	1.377	$13 / $64	193K
B	1.377	$0,137 / $0,411	128K
B	1.377	—	131K
B	1.375	$0,10 / $0,425	164K
B	1.373	$0,04 / $0,29	400K
B	1.373	$0,40 / $0,40	80K
B	1.372	$0,16 / $1	400K
B	1.370	$0,36 / $1,22	131K
B	1.369	$0,10 / $0,10	1M
B	1.369	$0,30 / $0,50	131K
B	1.368	$0,15 / $0,65	131K
B	1.367	—	—
B	1.366	$14 / $54	200K
B	1.365	$0,032 / $0,14	131K
B	1.362	$0,30 / $2,50	1M
B	1.361	—	—
B	1.361	—	—
B	1.359	$0,22 / $0,88	205K
B	1.358	$0,08 / $0,16Ücretsiz	131K
B	1.356	$0,13 / $0,50Ücretsiz	262K
B	1.356	—	—
B	1.355	$0,25 / $0,75	128K
B	1.354	$0,10 / $0,42	990K
B	1.353	$0,99 / $4	200K
B	1.351	$0,06 / $0,40	200K
B	1.351	$0,21 / $0,57	66K
B	1.351	$2,60 / $13	983K
B	1.348	$0,05 / $0,20Ücretsiz	131K
B	1.343	$0,132 / $1,25	1M
B	1.340	$0,32 / $1,28	1M
B	1.340	$0,05 / $0,10	131K
B	1.340	$0,25 / $0,80	262K
B	1.340	$0,20 / $1	205K
B	1.339	—	—
B	1.338	$0,075 / $0,20	128K
B	1.338	$0,40 / $0,40Ücretsiz	131K
B	1.337	$0,99 / $4	200K
B	1.336	—	—
B	1.334	$0,05 / $0,10Ücretsiz	131K
B	1.334	—	—
B	1.333	$0,29 / $0,86	64K
B	1.331	$2,50 / $10	256K
B	1.331	$10,00 / $10,00	128K
B	1.330	$0,052 / $0,21	990K
B	1.329	$0,18 / $0,20	24K
B	1.327	$0,0115 / $0,17	1M
B	1.326	$0,115 / $0,287	1M
B	1.321	$5,21 / $16,44	16K
B	1.320	$0,04 / $0,32	400K
B	1.320	Ücretsiz	128K
B	1.319	$0,99 / $4	200K
B	1.319	—	—
B	1.318	$0,06 / $0,25	131K
B	1.317	$1,10 / $4,40	128K
B	1.317	$0,0509 / $0,335	41K
B	1.314	$3 / $15	200K
B	1.311	—	—
B	1.311	—	—
B	1.308	—	—
B	1.305	Ücretsiz	128K
B	1.305	$2 / $10	131K
B	1.301	—	—
B	1.300	$5 / $15	128K
B	1.300	—	—
B	1.299	—	—
B	1.298	$3 / $15	200K
B	1.294	—	—
B	1.293	—	—
B	1.291	—	—
B	1.291	$0,04 / $0,08Ücretsiz	131K
B	1.290	$0,05 / $0,10	131K
B	1.288	—	—
B	1.288	—	—
B	1.288	$0,009 / $0,045Ücretsiz	131K
B	1.287	$0,05 / $0,10Ücretsiz	1M
B	1.287	—	—
B	1.286	$0,15 / $0,60	128K
B	1.285	$0,08 / $0,26	1M
B	1.284	$3,50 / $3,50	4K
B	1.283	$0,357 / $0,408Ücretsiz	128K
B	1.282	$2,50 / $10	128K
B	1.282	$0,345 / $1,38	33K
B	1.282	—	—
B	1.281	—	—
B	1.279	$0,05 / $0,10	328K
B	1.279	—	—
B	1.278	$0,10 / $0,30	128K
C	1.274	$0,05 / $0,23Ücretsiz	24K
B	1.274	—	—
C	1.272	$9 / $27	128K
C	1.269	$0,12 / $0,30	131K
C	1.266	$2 / $6	131K
C	1.265	$0,50 / $1,50	131K
C	1.265	—	—
C	1.263	$10 / $30	8K
C	1.263	—	—
C	1.262	$15 / $75	200K
C	1.261	$0,40 / $0,40Ücretsiz	131K
C	1.259	—	—
C	1.256	—	—
C	1.255	$0,80 / $4	200K
C	1.255	$2 / $5	128K
C	1.248	—	—
C	1.241	—	—
C	1.237	$2 / $8	256K
C	1.234	$0,05 / $0,08	33K
C	1.231	$0,65 / $0,65	8K
C	1.230	$0,06 / $0,20Ücretsiz	33K
C	1.229	$2,50 / $10	128K
C	1.228	—	—
C	1.228	—	—
C	1.227	—	—
C	1.226	—	—
C	1.226	—	—
C	1.225	—	—
C	1.224	$0,50 / $1,50	128K
C	1.221	$0,51 / $0,74	8K
C	1.218	$3 / $15	200K
C	1.218	—	—
C	1.218	—	—
C	1.217	$0,07 / $0,14	16K
C	1.208	—	—
C	1.207	$0,20 / $0,20	8K
C	1.204	$2,50 / $10	128K
C	1.203	$0,90 / $0,90	33K
C	1.202	—	—
C	1.195	$0,25 / $1,25	200K
C	1.193	—	—
C	1.191	—	33K
C	1.191	$0,10 / $0,10	128K
C	1.187	$0,15 / $0,60	128K
C	1.187	$0,20 / $0,40	256K
C	1.187	$0,02 / $0,04Ücretsiz	32K
C	1.175	—	—
C	1.173	—	—
C	1.170	—	—
C	1.166	—	—
C	1.166	$0,04 / $0,04	8K
C	1.165	—	—
C	1.163	$0,15 / $0,60	128K
C	1.162	$0,60 / $0,60	66K
C	1.158	—	—
C	1.156	Ücretsiz	128K
C	1.149	—	—
C	1.149	—	—
C	1.144	—	—
C	1.138	$0,17 / $0,68	4K
C	1.137	—	—
C	1.132	—	—
C	1.132	$0,15 / $0,15	32K
C	1.130	$2 / $12	1M
C	1.128	—	—
C	1.128	—	—
C	1.127	—	—
C	1.125	$0,45 / $1,40	16K
C	1.121	—	—
C	1.119	—	—
C	1.119	—	—
C	1.115	$1 / $1	4K
C	1.112	—	—
C	1.110	$0,15 / $0,60	8K
C	1.110	$0,02 / $0,02Ücretsiz	80K
C	1.108	—	—
C	1.107	—	—
C	1.105	—	—
C	1.105	—	—
C	1.101	—	—
C	1.098	—	—
C	1.096	—	—
C	1.094	—	—
C	1.092	—	—
D	1.090	$0,05 / $0,25	32K
D	1.084	$0,10 / $0,50	4K
D	1.083	—	—
D	1.083	—	—
D	1.081	—	—
D	1.080	—	—
D	1.080	—	—
D	1.076	—	—
D	1.073	$0,13 / $0,52	4K
D	1.069	—	—
D	1.069	—	—
D	1.065	—	—
D	1.058	—	—
D	1.058	—	—
D	1.057	—	—
D	1.056	$0,15 / $0,15	8K
D	1.055	$0,01 / $0,01Ücretsiz	60K
D	1.054	—	—
D	1.053	$0,05 / $0,25	4K
D	1.053	—	—
D	1.051	—	—
D	1.050	$0,13 / $0,52	128K
D	1.042	—	—
D	1.038	—	—
D	1.032	—	—
D	1.031	—	—
D	1.027	—	—
D	1.023	$0,07 / $0,28	33K
D	1.022	—	—
D	1.002	—	—
D	997	—	—
D	990	—	—
D	972	—	—
D	956	—	—
D	955	—	—
D	948	—	—
D	939	—	—
D	933	—	—
D	918	—	—
D	916	—	—
D	894	—	—
D	867	—	—
D	851	—	—
D	833	—	—