Aller au contenu
fedi.software

Comparer des modèles d'IA

Comparez jusqu'à quatre modèles côte à côte : tier et Elo dans chaque classement, prix, fenêtre de contexte et date de sortie.

Mis à jour · Sources: LiteLLM

Indicateur llama-3-70b-instruct Meta
Texte C 1 221 1 217–1 224
Programmation C 1 206 1 199–1 213
Entrée / sortie, par million 0,51 $US / 0,74 $US
Fenêtre de contexte 8K
Sortie maximale 8K
Sortie 18 avril 2024
Date limite des connaissances —
Licence Poids ouverts
Entrée texte
Application —

À quoi sert la comparaison

Un classement répond à la question « qui est devant ? ». La page « Comparer » répond à une autre : « lequel de ces modèles me convient ? ». Elle place jusqu'à 4 modèles en colonnes et aligne, pour chacun, le tier et la note sur chaque classement où il figure, les prix par unité, la fenêtre de contexte, la sortie maximale, les modalités acceptées, la mention poids ouverts et la date de sortie. On voit ainsi d'un coup d'œil qu'un modèle excelle en texte mais coûte plus cher, ou qu'un autre accepte les images et offre une plus grande fenêtre de contexte.

Composer sa comparaison

  1. Tapez le nom d'un modèle dans le champ de recherche et sélectionnez-le.
  2. Ou, depuis n'importe quel tableau de classement, cochez la case « Comparer » sur les lignes qui vous intéressent.
  3. Ajoutez jusqu'à 4 modèles, puis lisez les colonnes ligne par ligne.
  4. Pour partager le résultat, copiez le lien : il contient les modèles choisis.

Trois règles de lecture

  • Comparez les notes au sein d'un même classement. L'Elo du classement texte et le « Score » du classement agents sont deux échelles différentes ; les mettre côte à côte n'a pas de sens.
  • Une case vide n'est pas un zéro. Elle signifie que la source n'a pas de valeur pour ce modèle, par exemple parce qu'il n'est pas classé sur cette arène.
  • Le prix dépend de l'unité. Tokens, images, secondes de vidéo ou caractères : vérifiez l'unité avant de conclure qu'un modèle est moins cher.

D'où viennent les valeurs

Les notes proviennent de LMArena ; les prix, contextes, modalités et dates, de models.dev et LiteLLM. Les tiers sont calculés par le site selon la règle commune : au moins 300 votes, puis place rapportée au nombre de modèles, S sous 10 %, A sous 30 %, B sous 60 %, C sous 85 %, D au-delà. Un lien de comparaison avec des modèles choisis sert au partage ; seule la page vide est indexée par les moteurs de recherche.

Et ensuite ?

Une fois votre choix fait, les fournisseurs d'API indiquent où accéder au modèle, et les API gratuites permettent parfois de le tester sans frais.