Teks

Papan peringkat model chat

Halaman ini memeringkat model chat berdasarkan arena teks LMArena, kategori umum. Caranya: seseorang mengirim pertanyaan, menerima dua jawaban dari model anonim, lalu memilih jawaban yang lebih ia sukai. Ribuan suara semacam itu diolah menjadi nilai bergaya Elo. Jadi nilai ini mencerminkan preferensi pengguna arena, yang kebanyakan menulis dalam bahasa Inggris. Nilai tersebut tidak mengukur kecepatan, biaya, atau kemampuan pada tugas khusus Anda.

Isi setiap baris

Setiap model menampilkan tier, nilai dengan interval kepercayaan 95% dalam bentuk batang, pembuat, tanda “Bobot terbuka”, harga termurah saat ini per 1M token masukan dan keluaran, jendela konteks, serta tren harga 30 hari. Bila aplikasinya ada di katalog kami, muncul tautan untuk mengunduhnya. Klik sebuah baris untuk membuka rincian: penyedia dari yang termurah, modalitas, konteks dan keluaran maksimum, jumlah suara, posisi di sumber, lisensi, tanggal rilis, dan batas pengetahuan.

Membaca interval dan harga

• Jika interval dua model saling tumpang tindih, selisihnya tidak jelas secara statistik. Karena itu beberapa model bisa berbagi tier teratas.
• Model dengan kurang dari 300 suara ditandai “Belum ada tier”.
• Harga adalah yang terendah yang kami temukan di antara penyedia pada hari data, dalam USD.
• Harga penyedia bisa berbeda dari harga pembuat model; potongan untuk cache, pemrosesan batch, dan harga regional tidak ditampilkan.

Contoh cara memakai

Butuh model untuk membalas pesan pelanggan? Mulailah dari tier atas. Aktifkan filter “Harga rendah”. Lalu bandingkan dua atau tiga kandidat dengan pertanyaan nyata dari pelanggan Anda.

Alat bantu di halaman

Filter memisahkan model berbobot terbuka, gratis, “Harga rendah” (harga gabungan di bawah 1 USD per 1M token), dan pembuat tertentu. Kalkulator “Biaya per bulan” menghitung perkiraan dari jumlah token per bulan dan porsi masukan. Grafik “Kualitas vs harga” memakai harga gabungan dengan perbandingan 3 bagian masukan berbanding 1 bagian keluaran. Centang hingga 4 model untuk melihatnya berdampingan di halaman perbandingan. Untuk pertanyaan seputar kode, lihat juga papan pemrograman.