Российские языковые модели проверяют на реальных отзывах пользователей
Заявления о мировом уровне российских флагманских языковых моделей теперь можно проверить через открытый рейтинг llmarena.ru, где пользователи анонимно оценивают ответы нейросетей.
На фоне заявлений о том, что отечественные крупные языковые модели (LLM) входят в число ведущих мировых разработок, появилась возможность независимо оценить их качество. В России функционирует открытый рейтинг llmarena.ru, который позволяет сравнить ответы различных нейросетей.
Платформа llmarena.ru представляет собой аналог международных площадок, где пользователи вслепую выбирают лучший ответ из двух предложенных анонимных моделей. На данный момент рейтинг включает 112 моделей и собрал уже более 157 тысяч пользовательских голосов. Такой подход позволяет получить объективную оценку качества генерации текста и релевантности ответов LLM, опираясь на реальный опыт взаимодействия, а не только на бенчмарки.


Комментарии (0)
Без регистрации. Комментарии проверяются автоматически перед публикацией.
Пока нет комментариев. Будьте первым!