Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.
В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.
"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.
Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.
Самая большая галактика во Вселенной оказалась намного больше, чем считалось
В центре скопления галактик Abell 2029 находится огромная галактика, по форме напоминающая нечто среднее между эллипсом и спиралью. Её название — IC1101, и на её фоне галактики, подобные нашей, кажутся…
Уточнен круг загадочных «призрачных линий» гомининов, ставших нашими предками
В геномах современных людей скрыты слабые следы неопознанных «призрачных» линий — древних гомининов, с которыми наши предки, должно быть, скрещивались в далеком прошлом. Теперь американские ученые определили, когда два из…
Ученые впервые изучили историю гигантского восточно-гималайского ледника
С помощью сверхчувствительных методов датирования реконструированы процессы подъема и спуска одного из самых низких ледников, когда-либо зафиксированных в высокогорных районах Азии. Исследование, проведенное под руководством Манчестерского университета, показало, что гигантский…
МО: за ночь над регионами России уничтожили 635 украинских БПЛА
Российские средства ПВО перехватили и уничтожили в течение прошедшей ночи 635 украинских БПЛА над регионами РФ, акваториями Азовского и Черного морей. Об этом сообщили в Минобороны России. "В течение прошедшей…
ВС России ударили по используемым для ВСУ судам и инфраструктуре портов
ВС РФ минувшей ночью нанесли удары по двум судам и резервуару с горючим, используемым в интересах ВСУ, в портах Украины и акватории Черного моря. Об этом сообщили в Минобороны России.…
Стали известны подробности взрыва в центре Москвы
Самодельное взрывное устройство сработало около летнего кафе на Кудринской площади в центре Москвы, в результате чего 3 человека погибли, еще 21 человек получил ранения, сообщили в Информационном центре Национального антитеррористического…
Кишинев приступил к демонтажу автономии Гагаузии
Парламент Молдавии приступил к реформе избирательной системы Гагаузии, изменив правила формирования ...
Кошки ненавидят воду не по той причине, как многие считают
Кошки и вода — не совсем подходящая пара, но почему? Пустынное происхождение наших домашних кошек и ...
Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.
Зарегистрировано Федеральной службой по надзору в сфере связи, информационных технологий и массовых коммуникаций
(Роскомнадзор). Реестровая запись от 07.06.2022 серия ЭЛ № ФС 77 – 83392. При использовании, полном или частичном
цитировании материалов planet-today.ru активная гиперссылка обязательна. Мнения и взгляды авторов не всегда совпадают с
точкой зрения редакции. На информационном ресурсе применяются рекомендательные технологии (информационные технологии
предоставления информации на основе сбора, систематизации и анализа сведений, относящихся к предпочтениям пользователей
сети "Интернет", находящихся на территории Российской Федерации)".