Четверг 30 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Японская окаменелость заполняет двухмиллионный пробел в истории медоносных пчел Палеонтологи объявили об открытии нового вида ископаемых медоносных пчел, который заполняет давний пробел в эволюционной летописи рода Apis. Их статья была опубликована в журнале ZooKeys. Ископаемые медоносные пчелы встречаются крайне…

Наблюдение «блуждающей» черной дыры выявило спасшийся от слияния галактик объект Астрономы предполагают, что в центре всех или почти всех галактик находится сверхмассивная черная дыра. Но происходит ли то же самое с черными дырами при слиянии галактик? Моделирование показывает, что ответ…

Фитопланктон синтезирует около половины кислорода на Земле Примерно половину кислорода, ежегодно генерируемого на Земле, производит фитопланктон, который состоит из микроскопических водорослей и цианобактерий. Такие организмы населяют верхний слой океана, где проще получать солнечный свет для фотосинтеза, то…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавшие в Рязанской области и 295 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО в течение ночи перехватили и уничтожили 295 украинских беспилотников над российскими регионами, а также акваториями Азовского и Черного морей, сообщили в Минобороны РФ. Шесть человек госпитализировали в Рязанской…

Погибшая и двое пострадавших. Последствия воздушной атаки ВСУ на Таганрог Обломки ракеты упали на многоквартирный дом в Таганроге. В результате погибла женщина, мужчина получил ранения, сообщил губернатор Ростовской области Юрий Слюсарь. Кроме того, один человек пострадал в результате массированной атаки…

Шуваев: за сутки в Белгородской области при атаках ВСУ погибли четыре человека Четыре человека погибли, 46 получили ранения за минувшие сутки на территории Белгородской области в результате атак ВСУ. Об этом в Telegram-канале сообщил врио губернатора региона Александр Шуваев. "В Белгородском, Валуйском…

Тема дня

Запад пытается воевать с какой-то другой Россией

Мы сами не осознаем, насколько грандиозный процесс переживаем прямо сейчас, когда стараемся сохранит...

Фото

Груз с затонувшего корабля раскрывает удивительные торговые секреты 1600-х годов

В ходе нового исследования, проведенного под руководством Университета Кертина с использованием груз...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Ощущение, что кто-то просыпается и говорит: "Алиса, сделай ещё хуже."

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.