Разработан тест на способности роботов выполнять сложные задачи на кухне

Фото из открытых источников

Российскими учеными создан самый объёмный в мире открытый набор данных, предназначенных для оценки способности робототехнических комплексов легко и чётко понимать просьбы людей, в особенности, потенциально неоднозначные инструкции. Об этом рассказала пресс-служба Института искусственного интеллекта AIRI.

В ходе исследования эксперты собрали текстовый набор данных, включающий две тысячи задач с разметкой по типу неоднозначности для действий на кухне. Выяснилось, что ныне существующие алгоритмы пока не слишком эффективно распознают ситуации, требующие уточнения. Даже самые качественные модели показывают успешный результат только в 20% случаев.

Новый тест для роботов разработала группа сотрудников Института AIRI и МФТИ при поддержке Центра робототехники "Сбера". Это набор из привычных бытовых ситуаций, с которыми сталкивается робот при интерпретации неполных или неоднозначных инструкций человека, связанных с работами на кухне.

Многие простые инструкции, например, просьба принести что-нибудь попить, весьма неопределенны. Управляющие системы роботов пытаются решить эти проблемы с помощью уточняющих вопросов, но это часто утомляет пользователя и требует времени.

Российскими учеными подготовлен набор из двух тысяч сценариев с подробными описаниями задач, обстановки в кухне, вероятных уточняющих вопросов и планов действий. Часть задач была сформулирована максимально четко, другие, более неоднозначные, были разбиты на три категории - предпочтения людей, здравый смысл и безопасность.

Такая разбивка должна помочь разработчикам роботов и ИИ-систем для них корректировать работу этих алгоритмов и делать роботов более адаптивными и удобными для человека.