Siirry sisältöön
fedi.software

Teksti

Keskustelumallit ihmisten sokkoäänestysten mukaan LMArenassa, kunkin arvosanan luottamusväli ja nykyinen hinta miljoonaa tokenia kohden.

Päivitetty · Lähteet: LMArena, LiteLLM, models.dev

Kuukausikustannus
Taso Malli Elo Syöte / tuloste, 1 milj. Kuukaudessa Konteksti Sovellus Vertaa
S1 5392 $ / 10 $ 1M
S1 5280,60 $ / 3 $ 1M
S1 5243 $ / 15 $ 1M
S1 5130,8999 $ / 4,50 $ 1M
S1 5123,85 $ / 19,23 $ 1M
S1 5061,17 $ / 5,84 $ 1M
S1 5034 $ / 20 $ 1M
S1 5021,50 $ / 7,50 $ 1M
S1 5013,25 $ / 16,25 $ 1M
S1 5000,3429 $ / 1,71 $ 1M
S1 4940,10 $ / 0,20 $ 1M
S1 4930,2828 $ / 0,5655 $ 1M
S1 4923 $ / 18,50 $ 1M
S1 4901,17 $ / 5,84 $ 1M
S1 4890,3429 $ / 1,71 $ 1M
S1 4851,54 $ / 4,63 $ 1M
S1 4840,10 $ / 0,20 $ 1M
S1 4830,1857 $ / 1,11 $ 1M
S1 4801,18 $ / 5,30 $ 1M
S1 4800,57 $ / 3,43 $ 1M
S1 4800,3429 $ / 1,71 $ 1M
S1 4791,25 $ / 4,25 $ 1M
S1 4783,20 $ / 16 $ 1M
S1 4750,2244 $ / 0,7013 $Ilmainen 1M
S1 4750,90 $ / 4,50 $Ilmainen 1M
S1 4750,825 $ / 2,48 $ 1M
S1 474— —
S1 4710,0062 $ / 0,0185 $Ilmainen 1M
S1 471— —
S1 4710,3892 $ / 2,34 $ 1M
S1 4700,70 $ / 3,50 $ 1M
S1 4690,53 $ / 1,72 $ 1M
S1 4690,75 $ / 6 $ 1M
S1 4680,5634 $ / 2,54 $ 119K
S1 4660,07 $ / 0,43 $ 1M
S1 4640,435 $ / 0,87 $ 1M
S1 4630,03 $ / 0,12 $Ilmainen 1M
S1 4630,615 $ / 2,46 $ 203K
S1 4620,425 $ / 2,12 $ 1M
A1 4580,87 $ / 7 $ 1M
S1 4581,17 $ / 5,84 $ 1M
S1 4580,90 $ / 5,55 $ 1M
S1 4570,2462 $ / 1,23 $ 1M
A1 4550,1557 $ / 0,7784 $Ilmainen 262K
A1 4540,228 $ / 0,92 $ 1M
A1 4510,348 $ / 0,696 $ 1M
A1 4511,25 $ / 2,50 $ 2M
A1 4511,25 $ / 2,50 $ 1M
A1 4510,71 $ / 3,57 $ 200K
A1 4500,10 $ / 0,25 $ 1M
A1 4490,1231 $ / 0,7385 $ 1M
A1 449— —
A1 4490,63 $ / 3,79 $ 256K
A1 4482 $ / 6 $ 500K
A1 4460,1231 $ / 0,6154 $ 1M
A1 4461,04 $ / 6,24 $ 262K
A1 4460,40 $ / 1,75 $ 203K
A1 4450,10 $ / 0,10 $Ilmainen 1M
A1 4450,45 $ / 2,25 $ 262K
A1 444— —
A1 444— —
A1 4440,4579 $ / 1,24 $Ilmainen 1M
A1 4430,95 $ / 4,05 $ 262K
A1 4431,07 $ / 8,50 $ 400K
A1 4420,10 $ / 0,25 $Ilmainen 262K
A1 4420,70 $ / 3,50 $ 1M
A1 4410,6154 $ / 3,08 $ 1M
A1 4400,2740 $ / 1,10 $ 203K
A1 4390,36 $ / 1,43 $ 262K
A1 4390,066 $ / 0,26 $ 262K
A1 4390,43 $ / 2,14 $ 200K
A1 4381,75 $ / 14 $ 112K
A1 4380,1644 $ / 0,9864 $ 262K
A1 4370,045 $ / 0,32 $ 262K
A1 4372 $ / 10 $ 200K
A1 4361 $ / 3 $ 1M
A1 4360,2593 $ / 1,54 $ 1M
A1 4350,2740 $ / 1,10 $ 203K
A1 4350,225 $ / 1,88 $ 1M
A1 4340,0354 $ / 0,0943 $Ilmainen 262K
A1 4320,076 $ / 0,153 $ 1M
A1 4310,0123 $ / 0,0738 $ 1M
A1 4300,20 $ / 0,80 $ 131K
A1 4302 $ / 4,50 $ 500K
A1 4290,50 $ / 1,50 $ 256K
A1 4284,50 $ / 14 $ 128K
A1 4280,20 $ / 0,80 $ 164K
A1 4280,14 $ / 0,28 $ 1M
A1 4270,20 $ / 0,90 $ 1M
A1 426— 131K
A1 4260,1557 $ / 0,7784 $ 1M
A1 4263 $ / 15 $ 131K
A1 4250,22 $ / 0,33 $ 164K
A1 4250,2174 $ / 0,326 $ 164K
A1 4240,4232 $ / 2,12 $ 131K
A1 4240,25 $ / 1 $ 1M
A1 423— 262K
A1 4211,50 $ / 7,50 $ 256K
A1 4200,20 $ / 0,88 $ 131K
A1 4200,19 $ / 0,71 $ 164K
A1 4190,27 $ / 1 $ 128K
A1 41913 $ / 64 $ 197K
A1 4190,09 $ / 0,10 $ 131K
A1 4180,1126 $ / 0,9008 $ 262K
A1 4170,144 $ / 0,574 $ 131K
A1 4170,09 $ / 0,71 $ 1M
A1 4160,25 $ / 2 $ 128K
A1 4160,125 $ / 0,75 $ 1M
A1 4150,11 $ / 0,60 $ 131K
A1 4140,30 $ / 1,20 $ 66K
A1 4142 $ / 10 $ 1M
A1 4148 $ / 40 $ 1M
A1 4130,68 $ / 2,09 $ 1M
A1 4120,375 $ / 4 $ 400K
A1 4112,85 $ / 14,25 $ 256K
A1 4110,10 $ / 0,30 $ 262K
A1 4101,82 $ / 7,27 $ 200K
A1 4090,0846 $ / 0,6768 $ 262K
B1 4080,19 $ / 0,475 $ 2M
A1 4080,08 $ / 0,45 $Ilmainen 1M
A1 407— 2M
B1 4061,07 $ / 8,50 $ 400K
A1 406— —
B1 4040,0062 $ / 0,0185 $ 205K
B1 4030,09 $ / 0,30 $ 256K
A1 4030,15 $ / 0,50 $ 1M
B1 4010,17 $ / 0,5667 $ 262K
B1 401— 131K
B1 4000,287 $ / 2,87 $ 131K
B1 4000,1996 $ / 0,5988 $ 500K
B1 3980,1231 $ / 0,6154 $ 1M
B1 3980,05 $ / 0,25 $ 1M
B1 3970,0282 $ / 0,282 $ 1M
B1 3971,25 $ / 2,50 $ 1M
B1 3960,0778 $ / 0,3892 $ 200K
B1 3950,0564 $ / 0,4512 $ 262K
B1 3920,27 $ / 1,10 $ 205K
B1 3900,04 $ / 0,20 $ 1M
B1 3891,60 $ / 13 $ 128K
B1 389— —
B1 388— —
B1 3840,09 $ / 0,30 $ 256K
B1 3840,1165 $ / 0,2911 $ 131K
B1 3831,82 $ / 7,27 $ 1M
B1 3800,40 $ / 1,80 $ 131K
B1 3790,10 $ / 0,10 $ 1M
B1 3770,05 $ / 0,25 $ 262K
B1 377— 131K
B1 37713 $ / 64 $ 193K
B1 3760,137 $ / 0,411 $ 131K
B1 3750,15 $ / 0,60 $ 164K
B1 3740,04 $ / 0,29 $ 400K
B1 3730,55 $ / 2,20 $ 80K
B1 3720,1818 $ / 1,14 $ 400K
B1 3700,4232 $ / 2,12 $Ilmainen 131K
B1 3700,30 $ / 0,50 $ 131K
B1 3690,15 $ / 1,20 $ 131K
B1 367— —
B1 36614 $ / 54 $ 200K
B1 3650,0291 $ / 0,1455 $ 131K
B1 3620,30 $ / 2,50 $ 1M
B1 361— —
B1 361— —
B1 3590,22 $ / 0,88 $ 205K
B1 3580,064 $ / 0,128 $ 131K
B1 3560,20 $ / 0,80 $ 262K
B1 356— —
B1 3550,25 $ / 0,75 $ 128K
B1 3540,10 $ / 0,42 $ 990K
B1 3530,99 $ / 4 $ 200K
B1 3512,60 $ / 13 $ 983K
B1 3510,06 $ / 0,40 $Ilmainen 203K
B1 3480,05 $ / 0,20 $ 131K
B1 3430,132 $ / 1,25 $ 1M
B1 3400,3636 $ / 1,45 $ 1M
B1 3400,20 $ / 1 $ 205K
B1 3400,08 $ / 0,28 $ 131K
B1 3400,25 $ / 0,80 $ 262K
B1 339— —
B1 338— —
B1 3380,40 $ / 0,40 $ 131K
B1 336— —
B1 3340,04 $ / 0,12 $Ilmainen 131K
B1 334— —
B1 3330,1499 $ / 0,8996 $ 64K
B1 3312,50 $ / 10 $ 256K
B1 3300,052 $ / 0,21 $ 990K
B1 3300,0115 $ / 0,17 $ 262K
B1 3290,40 $ / 0,40 $ 24K
B1 3260,115 $ / 0,287 $ 1M
B1 3200,0455 $ / 0,3636 $ 400K
B1 3200,99 $ / 4 $ 200K
B1 320Ilmainen 128K
B1 319— —
B1 3190,06 $ / 0,15 $ 131K
B1 3171,10 $ / 4,40 $ 128K
B1 3170,076 $ / 0,228 $ 41K
B1 3142,60 $ / 13 $ 197K
B1 311— —
B1 311— —
B1 3052 $ / 10 $ 131K
B1 302— —
B1 3005 $ / 15 $ 128K
B1 299— —
B1 299— —
B1 2982,60 $ / 13 $ 189K
B1 294— —
B1 293— —
B1 291— —
B1 2910,05 $ / 0,10 $ 131K
B1 2910,04 $ / 0,05 $Ilmainen 131K
B1 288— —
B1 2880,009 $ / 0,045 $Ilmainen 131K
B1 2870,14 $ / 0,59 $ 1M
B1 287— —
B1 287— —
B1 2860,15 $ / 0,60 $ 128K
B1 2850,09 $ / 0,36 $ 1M
B1 2843,50 $ / 3,50 $ 4K
B1 2830,357 $ / 0,408 $Ilmainen 128K
B1 2832,27 $ / 9,09 $ 128K
B1 2820,345 $ / 1,38 $ 33K
B1 282— —
C1 281— —
C1 2790,08 $ / 0,30 $ 328K
C1 279— —
C1 2770,10 $ / 0,30 $ 128K
C1 2740,05 $ / 0,23 $ 131K
C1 274— —
C1 2729 $ / 27 $ 128K
C1 2690,11 $ / 0,38 $ 131K
C1 266— —
C1 2650,50 $ / 1,50 $ 131K
C1 265— —
C1 263— —
C1 26215 $ / 75 $ 200K
C1 2610,72 $ / 0,72 $ 131K
C1 2592,40 $ / 9,60 $ 317K
C1 256— —
C1 2550,68 $ / 3,40 $ 189K
C1 2552 $ / 5 $ 262K
C1 248— —
C1 2410,06 $ / 0,25 $ —
C1 2372 $ / 8 $ 256K
C1 2340,05 $ / 0,08 $ 33K
C1 2310,65 $ / 0,65 $ 8K
C1 2300,06 $ / 0,20 $ 33K
C1 2290,15 $ / 0,60 $ 128K
C1 2290,069 $ / 0,28 $ 317K
C1 228— —
C1 227— —
C1 226— —
C1 226— —
C1 225— —
C1 224— —
C1 2210,51 $ / 0,74 $ 8K
C1 2183 $ / 15 $ 200K
C1 218— —
C1 218— —
C1 2170,056 $ / 0,112 $ 16K
C1 2080,04 $ / 0,16 $ 133K
C1 2070,20 $ / 0,20 $ 8K
C1 20630 $ / 60 $ 8K
C1 2040,15 $ / 0,60 $ 128K
C1 202— —
C1 1950,21 $ / 1,10 $ 189K
C1 193— —
C1 191— 33K
C1 1910,135 $ / 0,135 $ 262K
C1 1870,20 $ / 0,40 $ 256K
C1 1870,02 $ / 0,03 $ 128K
C1 185— —
C1 175— —
C1 173— —
C1 170— —
C1 166— —
C1 1660,04 $ / 0,04 $ 8K
C1 1650,40 $ / 2 $ 131K
C1 1620,60 $ / 0,60 $ 66K
C1 158— —
C1 1500,03 $ / 0,25 $ —
C1 1492 $ / 10 $ 1M
C1 144— —
C1 137— —
C1 132— —
C1 1320,40 $ / 0,40 $ 32K
C1 128— —
C1 128— —
C1 1270,03 $ / 0,25 $ —
C1 1250,45 $ / 1,40 $ 16K
C1 121— —
C1 120— —
C1 119— —
C1 1151 $ / 1 $ 4K
C1 112— —
C1 1100,02 $ / 0,02 $ 80K
C1 108— —
C1 107— —
C1 105— —
C1 105— —
C1 101— —
C1 098— —
C1 0960,05 $ / 0,25 $ —
D1 094— —
D1 093— —
D1 0900,159 $ / 0,219 $ 32K
D1 0840,10 $ / 0,50 $ 4K
D1 083— —
D1 083— —
D1 081— —
D1 0800,03 $ / 0,25 $ —
D1 077— —
D1 069— —
D1 069— —
D1 066— —
D1 058— —
D1 058— —
D1 057— —
D1 0560,15 $ / 0,15 $ 8K
D1 0550,01 $ / 0,01 $ 60K
D1 054— —
D1 0530,05 $ / 0,25 $ 4K
D1 053— —
D1 051— —
D1 042— —
D1 038— —
D1 032— —
D1 031— —
D1 027— —
D1 0240,07 $ / 0,28 $ 33K
D1 022— —
D1 002— —
D997— —
D990— —
D972— —
D956— —
D955— —
D948— —
D939— —
D933— —
D918— —
D916— —
D894— —
D867— —
D851— —
D834— —
Vertaa ()

Tasot ovat omiamme: mallin sija taulukossa, kun lasketaan vain mallit, joiden koko luottamusväli on sen yläpuolella. S — parhaat 10 %, A — enintään 30 %, B — enintään 60 %, C — enintään 85 %, D — loput.

Laatu vs. hinta arvio pystyakselilla, yhdistetty hinta (3 osaa syötettä : 1 tulostetta) vaaka-akselilla, USD / 1 milj. tokenia
1 000 1 200 1 400 1 600 0,01 $ 0,10 $ 1 $ 10 $ 100 $ Gemini 4 Carbon Gemini 4 Argon Gemini 4 Neon

Mitä tekstin tulostaulukko mittaa

Sivu järjestää keskustelumallit LMArenan tekstiareenan overall-luokan mukaan. Menetelmä on yksinkertainen: käyttäjä lähettää kehotteen, kaksi nimetöntä mallia vastaa, käyttäjä äänestää mieleisempää vastausta, ja vasta sen jälkeen nimet paljastetaan. Äänistä lasketaan Elo-tyyppinen arvio – sama ajatus, jolla shakinpelaajat pannaan järjestykseen.

Jokaiseen malliin liitämme tietoja muista lähteistä: kehittäjän, merkinnän ”Avoimet painot”, edullisimman löytämämme hinnan miljoonaa syöte- ja tulostetokenia kohden, kontekstin koon, 30 päivän hintakehityksen sekä latauslinkin, jos kehittäjän sovellus on luettelossamme.

Näin luet rivin

  • Taso – oma kirjaimemme S:stä D:hen.
  • Elo ja palkki – palkki on 95 %:n luottamusväli. Jos kahden mallin välit menevät päällekkäin, ero ei ole tilastollisesti selvä, ja siksi kärjessä voi olla useita malleja.
  • Hinta – palveluntarjoajien halvin hinta tietojen päivänä dollareina.
  • ”Edullinen” – tällä taulukolla sekahinta alle 1 USD miljoonalta tokenilta.

Tasot, laskuri ja vertailu

Malli saa tason vasta, kun sillä on vähintään 300 ääntä; muuten näkyy ”Ei vielä tasoa”. Mallin sija on yksi plus niiden mallien määrä, joiden koko luottamusväli on sen välin yläpuolella. Kun sija jaetaan mallien määrällä, S on alle 10 %, A alle 30 %, B alle 60 %, C alle 85 % ja D loput.

”Kuukausikustannus”-laskuri laskee hinnan tokenimäärästä kuukaudessa ja syötteen osuudesta. Laadun ja hinnan kaavio käyttää sekahintaa, jossa on kolme osaa syötettä yhtä osaa tulostetta kohden (3 : 1). Rivin napsautus avaa tiedot, joissa palveluntarjoajat ovat halvimmasta alkaen, ja valintaruudulla voit verrata enintään 4 mallia.

Muista tämä

Arvio kuvaa areenan käyttäjien mieltymyksiä, enimmäkseen englanninkielisissä kehotteissa. Se ei kerro nopeudesta, hinnasta tai tietystä tehtävästä. Palveluntarjoajan hinta voi myös poiketa kehittäjän hinnasta, koska välimuistia, erähintoja ja alueellisia hintoja ei näytetä.