Искусственный интеллект научился предсказывает жесты по голосу

Ученые из США разработали приближенный к искусственному интеллекту алгоритм, который умеет предсказывать жесты рук по записи голоса. Алгоритм генерирует довольно реалистичные, но неточные результаты.

Авторами технологии стали сотрудники Калифорнийского университета в Беркли, которые взяли за основу ИИ-систему speech2gesture и обучили ее создавать жестикуляцию на основе голоса.

"Наша нейронная сеть выдает довольно реалистичные жесты, но они далеко не всегда подходят к речи. То есть, систему есть, куда развивать. Но даже на основе тех результатов, которые были получены, можно судить о степени развития технологий анализа видео", — говорят американские исследователи.

Для того, чтобы обучить нейросеть предсказывать жесты на основе голоса, алгоритму "скормили" примерно сто сорок четыре часа видеозаписей с жестикулирующими людьми.

Это были, в частности, ролики с ведущими новостей на ТВ, а также видео с проповедниками и учителями.

"Нейросеть угадывает положение рук в пространстве, действуя лишь на основе голоса, в сорока четырех процентах случаев. При этом, алгоритм то и дело путает жесты, генерируя весьма забавные результаты", — добавляют ученые.

Авторы технологии не уточнили, какое практическое применение может быть у их сложной ИИ-системы.