Сам себе интеллект // «Яндекс» и МТС разошлись в способах оценки ИИ
![Сам себе интеллект // «Яндекс» и МТС разошлись в способах оценки ИИ](https://iy.kommersant.ru/Issues.photo/DAILY/2024/134/KMO_185173_00713_1_t219_210144.jpg)
Активно развивающийся рынок искусственного интеллекта начинает сталкиваться с проблемами, характерными для развитых отраслей, например, выбора адекватной методики оценки эффективности. Российские разработчики больших языковых моделей (используются, в частности, для создания голосовых ассистентов) выбрали разные инструменты для публичного сравнения с другими разработками. Так, экспериментальная версия YandexGPT оценивается путем парного сравнения на «чатбот-арене», а модели MTS AI — путем решения заранее определенных задач. Участники рынка указывают на возможность использования разных бенчмарков эффективности для разных вопросов.