Нейросеть научилась предсказывать движения человека по видео

Разработчики из США представили алгоритм, который может предсказывать движения человека на основе видео с ним. Например, проанализировав видео с началом замаха руки, основанный на нейросетях алгоритм может достаточно точно спрогнозировать, как будет осуществляться бросок мяча.

Сталкиваясь с людьми, которые совершают какие-то действия, например, на улице, мы можем примерно представить себе, что эти люди будут делать в следующие секунды. Задача, которая для любого человека выглядит элементарно и не требует активного мысленного процесса, является невероятно сложной для компьютеров.

Современные системы машинного зрения толком не умеют прогнозировать ближайшие события, однако некоторые наработки в этой области все-таки существуют. Ученые из Калифорнийского университета в Беркли, группу которых возглавил Джитендра Малик, создали сложную модель, которая на основе последовательности кадров может предсказать поведение человека в ближайшие секунды.

Алгоритм основан на сверточной нейросети ResNet-50, а также вспомогательной нейросети, которая объединяет данные. В итоге прогноз осуществляется на основе восьми с лишним десятков параметров, благодаря чему получается весьма точным. Перспективы для применения этой технологии просто колоссальные — это, например, искусственный интеллект для самоуправляемых машин.