Четверг 16 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

В магнитном поле Солнца выявили действие классического закона турбулентности Исследователями Пермского национального исследовательского политехнического университета (ПНИПУ) в кооперации с коллегами из ряда российских вузов обнаружено соответствие колебаний магнитного поля на полюсах Солнца фундаментальному закону турбулентности, который был открыт в…

Рыбы и люди обладают удивительно древней структурой мозга Рыбы, птицы и млекопитающие отделились от общих предков сотни миллионов лет назад. Их мозг развивался по разным эволюционным путям. Тем не менее, исследователи давно заметили, что эти мозги, похоже, решают…

На гобелене из Байё действительно изображена комета Галлея Гобелен из Байё — одно из самых известных текстильных произведений в мире, и впервые за более чем 900 лет он вернулся в Англию, чтобы быть выставленным в Британском музее. Произведение…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавший в пригороде Воронежа, обесточенная Керчь и 93 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО в течение ночи перехватили и уничтожили над российскими регионами, а также акваториями Азовского и Черного морей 93 украинских беспилотника, сообщили в Минобороны РФ. Мужчина получил ранения при падении…

В Белгородской области при атаках ВСУ три человека получили ранения В результате атак со стороны ВСУ на Белгородскую область получили ранения три человека. Об этом сообщается в канале оперштаба региона в "Максе". "Сегодня ночью в городе Грайворон при детонации FPV-дрона…

Новые удары ВС России по украинским портам. Главное Вооруженные силы России ночью продолжили нанесение ударов по портам Украины, используемым в интересах доставки грузов для ВСУ, сообщили в Минобороны РФ. ТАСС собрал основное о ситуации. Заявление Минобороны ВС России…

Тема дня

Нетаньяху пытается создать в Иране «управляемый хаос»

Израильское правительство рассматривает управляемый хаос в регионе как оптимальную стратегию своего ...

Фото

В Конго обнаружен новый вид обезьян с необычными оранжевыми губами

Обезьяна с характерной маскообразной мордой, обнаруженная в отдаленном районе Демократической Респуб...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Парадокс нашего времени, молодым человеком могут считать лет до 40, при этом кризис среднего возраста может наступить в 30.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.