Перейти к основному содержанию
Реклама
Прямой эфир
Мир
FT назвала новую угрозу для производства дронов на Украине
Мир
Эксперт Солонников назвал атаку на судно угрозой морской блокады Калининграда
Мир
Около 60 тыс. пенсионеров в Румынии подали в суд из-за снижения пенсий
Происшествия
Силы ПВО сбили три беспилотника ВСУ над Севастополем
Мир
Посольство России назвало актом цензуры блокировку Google-аккаунта GFCN
Мир
В раде заявили об использовании русского языка большинством депутатов
Мир
В ЕС предложили увеличить расходы на оборону на 232%
Спорт
В Швейцарии возбудили уголовное дело после драки хоккеистов
Наука и техника
Эксперт объяснил причины сближения ChatGPT с традиционными поисковиками
Спорт
«Балтика» всухую обыграла «Оренбург» и одержала пятую победу в сезоне
Спорт
«Зенит» проиграл «Рубину» и потерпел первое поражение с сентября
Спорт
Мудрик обвинил главу Украинской ассоциации футбола во лжи
Спорт
Чемпиону мира по санному спорту Павличенко отказали в нейтральном статусе
Общество
Во Владикавказе после взрыва газа частично обрушился подъезд жилого дома
Общество
Во Владикавказе ввели режим ЧС после взрыва газа
Происшествия
Похитившего ребенка в Свердловской области мужчину ликвидировали
Общество
Сын Владимира Устинова рассказал о болезни отца и смерти матери
Мир
Nvidia выбыла из тройки самых дорогостоящих компаний

В рейтинг качества ответов нейросетей попала новая разработка «Яндекса»

0
Фото: ИЗВЕСТИЯ/Дмитрий Коротаев
Озвучить текст
Выделить главное
Вкл
Выкл

Нейросеть YandexGPT Experimental вошла в новый рейтинг Llmarena, который оценивает качество ответов генеративных моделей на русском языке.

В топ также включили GPT-4o, LLaMA 3.1 и Claude 3,5 Sonnet.

«Яндекс» подтвердил, что ведет работу над новой более мощной версией своей базовой языковой модели.

Рейтинг оценивает, насколько хорошо модели отвечают на вопросы на русском языке. Пользователи могут задавать их на «Арене» и сравнивать, какая из нейросетей ответила лучше. Ответы выдаются без привязки к конкретной нейросети, чтобы пользователь мог беспристрастно оценить их качество. На основе собранных оценок авторы сервиса строят лидерборд моделей.

«Арену» запустили разработчики из российского ML-комьюнити. Принцип работы был взят у зарубежного сервиса LMSYS Chatbot Arena — одного из самых авторитетных бенчмарков на зарубежном рынке.

Читайте также
Прямой эфир