Российский ИИ научился "читать" эмоции по голосу, мимике и речи

Фото из открытых источников

Ученые из России создали систему искусственного интеллекта, способную с высокой точностью определять эмоциональное состояние человека. Пресс-служба Сбербанка, как пишет ТАСС, сообщила, что ключевая особенность разработки заключается в способности анализировать сразу три источника информации: мимику, голос и речь.

Система была разработана научным директором Центра практического искусственного интеллекта Сбербанка Андреем Савченко и исследователем Алексеем Андреевым из НИУ ВШЭ в Нижнем Новгороде. Благодаря мультиканальному подходу новая ИИ-модель выявляет эмоции точнее, чем предыдущие технологии, основанные на анализе только одного типа данных. По словам авторов, их разработка показала на 10% более высокую точность по сравнению с существующими аналогами.

Интеллектуальная система анализирует динамику эмоционального состояния во времени, что делает её особенно эффективной в условиях, приближенных к реальной жизни. Это позволяет ИИ учитывать не только моментальное выражение эмоций, но и изменения, происходящие с пользователем в процессе общения. Например, если человек сначала спокоен, а затем начинает испытывать раздражение, система уловит это изменение и скорректирует реакцию.

Одним из значительных преимуществ новой модели является её адаптивность. Даже при плохом освещении или слабом звуке, когда мимика или голос распознаются с трудом, система продолжает функционировать. Это делает её пригодной для использования в таких сферах, как телемедицина, системы безопасности, а также в сервисах виртуальных помощников.

Потенциальные области применения технологии разнообразны. В маркетинге она может помочь точнее понимать реакцию клиентов на предложения, в службах поддержки — улучшить взаимодействие с пользователями, а в системах мониторинга — выявлять признаки паники или агрессии. Подход, в котором ИИ "видит" и "слышит" эмоции, приближает его к более естественному и интуитивному взаимодействию с человеком.

Исследователи подчеркивают, что разработка рассчитана на работу в условиях внешних помех — шума, нестабильного интернет-соединения, частично закрытого лица. Это делает её особенно актуальной для дистанционного обслуживания клиентов и ситуаций, когда важно быстро и точно понять эмоциональное состояние человека.