Среда 15 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

«Вояджер-1» движется со скоростью 17 км/с, но не преодолел даже 1 световой день «Вояджер-1» совершил невероятное путешествие, превзошедшее все ожидания. И вот он вот-вот достигнет еще одной важной вехи. Этот небольшой космический аппарат размером с автомобиль стал первым созданным человеком объектом, вышедшим в…

Марсоход НАСА Curiosity обнаружил на Марсе странные многоугольные структуры В последнее время марсоходу Curiosity («Кьюриосити») от NASA уделяется меньше внимания, чем более новому и усовершенствованному марсоходу Perseverance. Это, вероятно, и неудивительно, учитывая, что Perseverance в настоящее время исследует кратер…

Как гориллы наращивают мышечную массу на растительной «диете» У горных горилл наращивается большая мышечная масса, хотя они питаются в основном листьями, побегами и стеблями. Эксперты отмечают, что на их пример ясно: мясо - не обязательное условие для складывания…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавший на Кубани, возгорание на Афипском НПЗ и 288 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО в течение прошедшей ночи перехватили и уничтожили 288 украинских беспилотников над российскими регионами и акваториями Азовского и Черного морей, сообщили в Минобороны РФ. Из-за падения обломков БПЛА в…

ВС России нанесли групповые удары по предприятиям ВПК Украины ВС России ночью нанесли групповые удары, в Киеве поражены предприятия военной промышленности, а в порту Южный Одесской области - объекты инфраструктуры, используемые для хранения горюче-смазочных материалов ВСУ. Об этом сообщили…

ФСБ сорвала попытку теракта с использованием БПЛА на стратегическое предприятие в Подмосковье ФСБ сорвала массированную атаку беспилотниками на стратегическое предприятие в одном из жилых массивов Подмосковья. Об этом сообщили в Центре общественных связей (ЦОС) ФСБ России. ТАСС собрал основное о ЧП. Предотвращение…

Тема дня

Почему Европа не в состоянии защититься от американского хамства

Как бы европейцы ни ненавидели Трампа, как бы ни тяготились своей зависимостью от Америки, они вынуж...

Фото

В окрестностях Солнца астрономы обнаружили четыре новых белых карлика

Международная группа астрономов обнаружила в окрестностях Солнца четыре новых белых карлика, которые...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Парадокс нашего времени, молодым человеком могут считать лет до 40, при этом кризис среднего возраста может наступить в 30.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.