В России нейросеть оживила и научила говорить портрет Достоевского

Фото из открытых источников

Разработчики из России разработали приближенный к ИИ алгоритм, который при помощи сверточных нейронных сетей "оживляет" фотографии и картины. Смотрите ниже видео с демонстрацией работы алгоритма — в ролике можно увидеть "оживших" Достоевского, Дали, Эйнштейна и других ушедших знаменитостей.

Нейросети, способные анимировать статичные изображения — это нынче не редкость, однако разработчики из "Сколтеха" говорят, что их система обладает некоторыми уникальными преимуществами.

"Наш алгоритм использует векторную маску, полученную в результате предварительного обучения на большом массиве данных. Маска накладывается на любой портрет и помечает границы частей лица, а также отмечает базовую мимику. Особенности технологии позволяют с легкостью оживлять практически любые портреты", — рассказывают разработчики.

В качестве массива входных данных для обучения нейросети применялись записи интервью со знаменитостями, найденные в сервисе YouTube.

"Нейросеть-эмбеддер трансформировала маски, соединенные с особенностями лица, в векторные структуры, которые затем были применены для инициализации нейросети-генератора анимации", — добавляют в "Сколтехе".

Предварительное тестирование системы, осуществленное на изображениях знаменитостей, показало, что результат работы ИИ выглядит более чем впечатляюще.