LMSYS
Разработчик LMSYS: состав, места в рейтингах, цены и выпуски моделей.
Главное
- Семейств24 модели в каталогах
- Лучшая модельVicuna 33B367-е из 419 в общем зачёте
- Самая популярнаяне зафиксированадоли токенов не наблюдались
- Доля всех токеновне зафиксированадоля токенов через API-агрегаторы за 30 дней
- СтранаСШАlmsys.org
- Открытые моделиНетлицензии на веса в каталогах не указаны
Семейства
- СемействоVicuna3 моделилучшая: Vicuna 33B, 367-е из 419
- СемействоFastchat T1 модельлучшая: FastChat-T5 3B, 416-е из 419
Другие разработчики
- Разработчик · СШАAnthropic23 моделилучшая: Claude Opus 4.6, 10-е из 419 в общем зачётецена $5 / $25
- Разработчик · КитайXiaomi8 моделейлучшая: MiMo-V2.6-Pro, 12-е из 419 в общем зачётецена $0,44 / $0,87
- Разработчик · КитайAlibaba Qwen79 моделейлучшая: Qwen3.8 Max (0902), 16-е из 419 в общем зачётецена $2 / $6
- Разработчик · СШАGoogle61 модельлучшая: Gemini 3.1 Pro Preview, 20-е из 419 в общем зачётецена $2 / $12
Вопросы и ответы
Ранняя оценка Vicuna от LMSYS — это тот же рейтинг, что голоса людей?
Нет. В анонсе Vicuna от марта 2023 ответы сравнивал GPT-4; сами авторы называли проверку предварительной и недостаточно строгой. Позже LMSYS отдельно публиковала оценки Arena по анонимным голосам людей и MT-Bench с автоматической проверкой. Числа из этих процедур нельзя читать как одну шкалу или продолжение одного ряда.
Как считается и откуда данные · данные обновлены 2 ноября 2026
Оценки и интервалы приведены как в открытых замерах оценок людей, без пересчёта; доля использования — по публичным данным API-агрегаторов (топ-K моделей и строка «прочие»); характеристики и цены — из каталогов и провайдеров с датой наблюдения. Интервал у оценки не равен диапазону мест: соседние модели с пересекающимися интервалами статистически неразличимы.
Полная методика: источники, частота обновления, что означает число