Среда 29 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

MX: Названа привычка, которая ведет к сокращению объёма мозга У любителей подолгу смотреть телевизор в зрелом возрасте могут развиваться негативные структурные трансформации головного мозга. В ходе нового исследования специалистами были изучены данные почти 1,7 тысячи добровольцев. За испытуемыми вели…

Человеческий мозг может хранить информации в 1000 раз больше, чем считалось Человеческий мозг ежедневно выполняет триллионы вычислений, потребляя при этом примерно столько же электроэнергии, сколько тусклая лампочка. Несмотря на десятилетия исследований, ученые так и не смогли до конца понять, как оно…

Обнаружена схожая реакция на радиацию у млекопитающих и бактерий Воздействие малых доз радиации на бактерии и млекопитающих оказалось схожим, выяснили отечественные ученые. Исследование даёт возможность прогнозирования воздействия радиации на тех стадиях, когда ещё не фиксируются видимые симптомы поражения, сообщила…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавшие в Рязанской области и 295 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО в течение ночи перехватили и уничтожили 295 украинских беспилотников над российскими регионами, а также акваториями Азовского и Черного морей, сообщили в Минобороны РФ. Шесть человек госпитализировали в Рязанской…

Погибшая и двое пострадавших. Последствия воздушной атаки ВСУ на Таганрог Обломки ракеты упали на многоквартирный дом в Таганроге. В результате погибла женщина, мужчина получил ранения, сообщил губернатор Ростовской области Юрий Слюсарь. Кроме того, один человек пострадал в результате массированной атаки…

Шуваев: за сутки в Белгородской области при атаках ВСУ погибли четыре человека Четыре человека погибли, 46 получили ранения за минувшие сутки на территории Белгородской области в результате атак ВСУ. Об этом в Telegram-канале сообщил врио губернатора региона Александр Шуваев. "В Белгородском, Валуйском…

Тема дня

Запад пытается воевать с какой-то другой Россией

Мы сами не осознаем, насколько грандиозный процесс переживаем прямо сейчас, когда стараемся сохранит...

Фото

Окаменелость ихтиозавра показала, что его последней добычей был птерозавр

Около 100 миллионов лет назад, по всей видимости, последней добычей океанического ихтиозавра стало н...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Ощущение, что кто-то просыпается и говорит: "Алиса, сделай ещё хуже."

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.