Na vsebino
fedi.software

Modeli umetne inteligence iz leta 2024: kdo je izdal kaj

Vse pomembne izdaje modelov mesec za mesecem: ponudnik in njegova država, odprte ali zaprte uteži, vrsta, kontekstno okno, velikost odprtih modelov — in pri katerih nalogah modeli posameznega leta vodijo danes.

2024 59 izdaj · 37 z odprtimi utežmi

Modeli iz leta 2024, ki danes vodijo pri posamezni nalogi

December

  1. B DeepSeek V3 HFDeepSeekKitajskaOdprte utežiLLM164K685B / 37B
  2. B gemini-2.0-flash-001GoogleZdružene države AmerikeZaprtoVid (VLM)990K
  3. C Llama 3.3 70B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM24K70.6B
  4. B OpenAI o1OpenAIZdružene države AmerikeZaprtoVid (VLM)200K
  5. C veo-2GoogleZdružene države AmerikeZaprtoVideo
  6. EXAONE 3.5 7.8B Instruct AWQ HFLG AI ResearchJužna KorejaOdprte utežiLLM7.8B

November

  1. B Qwen2.5 Coder 32B Instruct HFAlibabaKitajskaOdprte utežiLLM33K32.8B
  2. Qwen2.5 Coder 14B Instruct HFAlibabaKitajskaOdprte utežiLLM14.8B
  3. C Mistral LargeMistral AIFrancijaOdprte utežiLLM131K

Oktober

  1. C Aya Expanse 32BCohereKanadaOdprte utežiLLM128K
  2. B claude-3-5-haiku-20241022AnthropicZdružene države AmerikeZaprtoVid (VLM)200K
  3. B claude-3-5-sonnet-20241022AnthropicZdružene države AmerikeZaprtoVid (VLM)200K

September

  1. D Llama 3.2 1B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM60K1.2B
  2. C Llama 3.2 3B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM80K3.2B
  3. Llama 3.2 1B HFMetaZdružene države AmerikeOdprte utežiLLM1.2B
  4. Llama 3.2 3B HFMetaZdružene države AmerikeOdprte utežiLLM3.2B
  5. Qwen2.5 Coder 1.5B HFAlibabaKitajskaOdprte utežiLLM1.5B
  6. Qwen2.5 1.5B Instruct HFAlibabaKitajskaOdprte utežiLLM1.5B
  7. Qwen2.5 32B Instruct HFAlibabaKitajskaOdprte utežiLLM32.8B
  8. Qwen2.5 3B Instruct HFAlibabaKitajskaOdprte utežiLLM3.1B
  9. Qwen2.5 Coder 7B Instruct HFAlibabaKitajskaOdprte utežiLLM7.6B
  10. Qwen2.5 14B Instruct HFAlibabaKitajskaOdprte utežiLLM14.8B
  11. Qwen2.5 7B HFAlibabaKitajskaOdprte utežiLLM7.6B
  12. B o1-miniOpenAIZdružene države AmerikeZaprtoLLM128K
  13. B Qwen2.5 72B Instruct HFAlibabaKitajskaOdprte utežiLLM131K72.7B
  14. Qwen2.5 7B Instruct HFAlibabaKitajskaOdprte utežiLLM131K7.6B
  15. Qwen2.5 VL 72B Instruct HFAlibabaKitajskaOdprte utežiVid (VLM)131K73.4B

Avgust

  1. C Command R (08-2024)CohereKanadaOdprte utežiLLM128K
  2. C Command R+ (08-2024)CohereKanadaOdprte utežiLLM128K
  3. Hermes 3 70B Instruct HFNous ResearchZdružene države AmerikeOdprte utežiLLM66K70.6B
  4. Hermes 3 405B Instruct HFNous ResearchZdružene države AmerikeZaprtoLLM131K
  5. B grok-2-2024-08-13xAIZdružene države AmerikeZaprtoLLM131K
  6. B grok-2-mini-2024-08-13xAIZdružene države AmerikeZaprtoLLM
  7. B GPT-4o (2024-08-06)OpenAIZdružene države AmerikeZaprtoVid (VLM)128K
  8. D flux-1-dev-fp8Black Forest LabsNemčijaZaprtoSlika

Julij

  1. C Llama 3.1 70B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM131K70.6B
  2. C Llama 3.1 8B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM32K8B
  3. B GPT-4o-mini (2024-07-18)OpenAIZdružene države AmerikeZaprtoVid (VLM)128K
  4. Llama 3.1 8B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM8B
  5. C gemma-2-2b-it HFGoogleZdružene države AmerikeOdprte utežiLLM128K2.6B
  6. Llama 3.1 8B HFMetaZdružene države AmerikeOdprte utežiLLM8B
  7. C Gemma 2 27B HFGoogleZdružene države AmerikeZaprtoLLM8K
  8. C Mistral Large 2407Mistral AIFrancijaZaprtoLLM131K
  9. Mistral Nemo HFMistral AIFrancijaOdprte utežiLLM128K12.2B

Junij

  1. C gemma-2-9b-it HFGoogleZdružene države AmerikeZaprtoLLM8K
  2. Llama 3 Groq 8B Tool Use HFGroqZdružene države AmerikeOdprte utežiLLM8B
  3. DeepSeek Coder V2 Lite Instruct HFDeepSeekKitajskaOdprte utežiLLM15.7B / 2.7B

Maj

  1. B GPT-4o (2024-05-13)OpenAIZdružene države AmerikeZaprtoVid (VLM)128K

April

  1. C llama-3-8b-instructMetaZdružene države AmerikeOdprte utežiLLM8K
  2. C llama-3-70b-instructMetaZdružene države AmerikeOdprte utežiLLM8K
  3. Meta Llama 3 8B HFMetaZdružene države AmerikeOdprte utežiLLM8B
  4. Meta Llama 3 8B Instruct HFMetaZdružene države AmerikeOdprte utežiLLM8B
  5. Mixtral 8x22B Instruct HFMistral AIFrancijaZaprtoLLM66K
  6. OpenELM 1 1B Instruct HFAppleZdružene države AmerikeOdprte utežiLLM1.1B
  7. B Qwen MaxAlibabaKitajskaZaprtoLLM33K

Marec

  1. C claude-3-haiku-20240307AnthropicZdružene države AmerikeZaprtoVid (VLM)200K

Februar

  1. C claude-3-opus-20240229AnthropicZdružene države AmerikeZaprtoLLM200K
  2. C claude-3-sonnet-20240229AnthropicZdružene države AmerikeZaprtoLLM200K

Januar

  1. B Qwen PlusAlibabaKitajskaZaprtoLLM1M

Datumi izdaje izvirajo iz katalogov modelov (models.dev, LiteLLM, Hugging Face); modeli, za katere je znano le leto izdaje, niso prikazani. Vodilni modeli leta so njegovi modeli, ki so danes najvišje na naših lestvicah.

Posodobljeno · Viri: models.dev (MIT), LiteLLM (MIT), LMArena (CC BY 4.0), Hugging Face

Arena (LMArena) scores: Arena Leaderboard Dataset by LMArena, CC BY 4.0. Modified by fedi.software (filtered, re-ranked, aggregated). Not endorsed by LMArena.

Kaj prikazuje časovnica

Infografika »Modeli umetne inteligence po letih: kdo je izdal kaj« razvrsti izdaje modelov po času. Leta si sledijo od zadnjega proti starejšim, znotraj leta pa so izdaje razdeljene po mesecih. Vsaka vrstica je en model: razvijalec in država, v kateri ima podjetje sedež, odprte ali zaprte uteži, vrsta modela in kontekstno okno. Pri odprtih modelih je dodano še število parametrov.

Na časovnici so modeli laboratorijev, ki imajo oceno na naših lestvicah ali pa so uteži objavili na Hugging Face. Preprodajalcev, usmerjevalnikov in ljubiteljskih dodatno naučenih različic ni, ker bi zabrisali, kdo je model v resnici razvil.

Kako brati oznake v vrstici

  • »Odprte uteži« (open weights) pomenijo, da datoteke modela lahko prenesete in ga zaženete na svojem računalniku. Koliko pomnilnika za to potrebujete, pokaže infografika kateri odprti model se prilega vaši strojni opremi.
  • »Zaprto« pomeni, da je model dostopen le prek aplikacije ali API-ja razvijalca.
  • LLM je besedilni model, »Vid (VLM)« razume tudi slike, »Sklepanje« pa označuje model, ki nalogo pred odgovorom razčleni po korakih. Tak model je počasnejši in na odgovor dražji, zato pa močnejši pri matematiki, kodi in načrtovanju.
  • Število parametrov je navedeno samo pri odprtih modelih, ker zaprti razvijalci tega podatka ne objavljajo. Pri modelu z mešanico strokovnjakov (MoE) druga številka pove, koliko parametrov je dejavnih pri vsakem žetonu.

Kako uporabiti časovnico, korak za korakom

  1. Izberite leto. Nad njim je trak z modeli tistega leta, ki danes vodijo na lestvicah besedila, programiranja, spletnega razvoja, agentov, slik in videa.
  2. Seznam zožite s filtri po razvijalcu, državi, odprtih utežeh in vrsti ali pa model poiščite z iskalnikom.
  3. Leto odprite na lastni strani. Vsako leto ima svojo letno izdajo, na katero se lahko trajno sklicujete.
  4. Model, ki vas zanima, nato poiščite na lestvici besedilnih modelov ali ga dodajte v primerjavo.

Pri tem traku velja pomemben pomislek: to je pogled z današnjega dne. Model, izdan spomladi, je lahko vodstvo izgubil že jeseni, trak pa pokaže, kje je njegova generacija na lestvicah zdaj, ne kje je bila takrat.

Od kod so datumi in kje so omejitve

Datumi izdaje in kontekst prihajajo iz katalogov models.dev in LiteLLM, parametri in licence s Hugging Face, ocene za trak nad vsakim letom z LMArena, države razvijalcev pa dopolnjuje fedi.software. Datum pomeni dan, ko se je model pojavil v katalogih, zato se lahko od uradne objave razlikuje za nekaj dni. Modelov, pri katerih viri poznajo le leto izdaje, na časovnici ni. Država je tista, v kateri ima podjetje sedež, ne država njegovih podatkovnih centrov ali uporabnikov.