Text

Topplistan för textmodeller bygger på den övergripande kategorin i LMArenas textarena. Där skickar människor en fråga, får två anonyma svar och röstar på det de föredrar. Rösterna räknas om till ett betyg i Elo-stil, samma princip som i schack.

Så läser du tabellen

• Tier och betyg: stapeln visar betyget med dess 95%-konfidensintervall.
• Leverantör och ”Öppna vikter”: vem som gjort modellen och om vikterna går att ladda ner.
• Pris: det lägsta aktuella priset per 1M input- och output-tokens bland leverantörerna, i USD, samt prisutvecklingen under 30 dagar.
• Kontext: hur mycket text modellen kan hålla i minnet i ett samtal.
• Nedladdning: en länk till appen när den finns i vår katalog.

Med filtren väljer du öppna vikter, gratis, ”Lågt pris” eller en viss leverantör, och du kan sortera efter betyg, pris, kontext eller namn. Klickar du på en rad ser du leverantörerna med det billigaste priset först, modaliteter, kontext och maximal output, antal röster, placering hos källan, licens, lanseringsdatum och när modellens kunskap slutar. Kryssrutan lägger till upp till 4 modeller i jämförelsen.

Varför flera modeller delar toppen

Konfidensintervallen överlappar ofta. Då går det inte att säga statistiskt vilken av två modeller som är bättre, och båda kan hamna i samma tier. Vår regel: bland modeller med minst 300 röster får varje modell plats efter hur många modeller vars hela intervall ligger ovanför dess eget. Under 10% av listan blir S, under 30% A, under 60% B, under 85% C och resten D. En modell med färre röster visas som ”Ingen tier ännu”.

Kalkylatorn och diagrammet

I ”Kostnad per månad” anger du tokens per månad och andelen input, så räknas kostnaden ut för varje modell. Diagrammet ”Kvalitet mot pris” placerar betyget uppåt och ett blandat pris åt sidan, där input och output vägs 3 : 1. ”Lågt pris” betyder här ett blandat pris under 1 USD per 1M tokens.

Vad betyget inte säger

Betyget speglar vad arenans användare föredrar, oftast på engelska frågor. Det mäter inte hastighet, kostnad eller hur bra en modell är på just din uppgift. Priset hos en leverantör kan också skilja sig från tillverkarens eget: rabatter för cache, batchkörning och regionala priser visas inte. Källorna är LMArena för betygen samt models.dev och LiteLLM för priser, kontext och modaliteter, alla uppdaterade dagligen.