Суббота 11 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Череп возрастом 145 000 лет имеет следы сложного «ножевого» ранения в лицо Первые известные люди, разработавшие погребальные обычаи, возможно, пережили при жизни ужасающие акты насилия. Один из членов этой группы, по всей видимости, подвергся нападению с применением острого предмета, в результате чего…

Морские губки, подобно растениям, производят пищу из солнечного света Долгое время губки на коралловых рифах имели довольно простую репутацию. Они сидели на одном месте и питались тем, что приносила мимо них вода. Теперь эта картина выглядит неполной. Новое исследование…

Ученые впервые наблюдали за рождением фрагмента океанической коры Земли Большая часть земной коры нашей планеты сформирована в талласе, который человеческий глаз никогда не увидит. На протяжении 65 000 километров океанского дна система срединно-океанических хребтов отмечает границы, где встречаются тектонические…

Интернет и СМИ

Новости СМИ2

Главное за сутки

МО: за ночь над регионами России сбили 178 украинских беспилотников Средства ПВО РФ в ночь на 11 июля уничтожили 178 украинских беспилотников. Об этом сообщили в Минобороны РФ. "В течение ночи в период с 20:00 мск 10 июля до 8:00…

В Таганрогском заливе при атаке украинского БПЛА погиб матрос технического судна В Таганрогском заливе из-за атаки БПЛА погиб матрос технического судна. Атаке подверглись четыре судна различного назначения, об этом сообщил в "Максе" губернатор Ростовской области Юрий Слюсарь. "Сегодня вновь в Таганрогском…

ВС России в ночь на 11 июля ударили по предприятиям ВПК в Киеве Российские войска в ночь на 11 июля нанесли групповые удары высокоточным оружием большой дальности по предприятиям военной промышленности в Киеве. Об этом сообщили в Минобороны РФ. "Сегодня ночью Вооруженными силами…

Тема дня

Волынская резня заставила Польшу проводить свою денацификацию Украины

В субботу отмечается годовщина Волынской резни, жертвами которой стали 100 тыс. человек. Но Украина ...

Фото

Черная дыра в ближайшей галактике может открыть окно в раннюю Вселенную

Международная группа исследователей из Института радиоастрономии им. Макса Планка (MPIfR) недавно со...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Всегда смущало наличие в ПДД гужевой повозки. Сейчас вообще вопросов не возникает.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.