Понедельник 25 мая 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Меркурий мог получить всю свою неожиданную воду всего за один день Около 100 миллионов лет назад поверхность Меркурия внезапно претерпела драматические изменения. До этого её поверхность была относительно сухой и свободной от льда — что неудивительно, поскольку дневная температура там может…

Центр памяти в мозге изначально «переполнен», а затем «обрезается» Недавно обнаруженный процесс развития показывает, что первичный центр памяти мозга изначально имеет избыток запутанных, случайных связей, которые постепенно отсеиваются, образуя высокоструктурированную, эффективную сеть по мере роста животного. Эти физические и…

Nature: Озвучен способ предотвратить половину случаев онкологии Специалисты ВОЗ пришли к выводу, что свыше трети случаев злокачественных заболеваний в мире можно предотвратить. По оценкам экспертов, в 2022 году порядка 38% новых диагнозов были коррелированы с факторами риска,…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавшая в Ярославской области и 173 БПЛА: последствия атак ВСУ на регионы Средства ПВО за прошедшую ночь перехватили и уничтожили над российскими регионами 173 украинских беспилотника, сообщили в Минобороны РФ. Массовую атаку украинских БПЛА отразили вблизи Ярославля, осколочное ранение получила женщина. ТАСС…

Ковальчук: в Брянской области при атаке ВСУ погиб человек Вооруженные силы Украины нанесли целенаправленный массированный удар из РСЗО "Град" по мирным жителям поселка Белая Березка Трубчевского района Брянской области. В результате атаки погиб мирный житель, сотрудник пожарно-спасательной службы доставлен…

В Белгородской области из-за атаки украинского дрона погиб мужчина ВСУ при помощи дрона атаковали автомобиль в Грайвороне Белгородской области. Мужчина погиб на месте, сообщили в региональном оперштабе. "В результате очередного удара со стороны ВСУ погиб мирный житель. В городе…

Тема дня

«Гибридная война Лукашенко» оказалась многолетним делом литовской мафии

Крупная мафиозная группировка раскрыта в Литве: полиция помогала контрабандистам нелегально переправ...

Фото

Тропический лес возрастом 150 000 лет переписывает историю раннего человечества

В Западной Африке произошло новаторское археологическое открытие, которое ставит под сомнение устояв...

Опрос

С каким чувством вы смотрите в будущее?

Показать результаты »

Анекдот дня

Кто виноват?

Что делать?

А зачем?

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.