Пятница 31 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

У странного трёхлопастного астероида есть свой крошечный спутник Астрономы обнаружили один из самых странных на вид астероидов, которые мы когда-либо видели. Этот космический камень, получивший название 44 Ниса, был обнаружен в 1857 году, но только сейчас у ученых…

Груз с затонувшего корабля раскрывает удивительные торговые секреты 1600-х годов В ходе нового исследования, проведенного под руководством Университета Кертина с использованием груза, поднятого с одного из самых печально известных кораблекрушений в Австралии, было выявлено, насколько удивительно сложными были глобальные цепочки…

Марсоход Curiosity обнаружил огромное поле с сотовой текстурой Когда марсоход НАСА Curiosity («Кьюриосити») недавно начал подниматься по марсианской долине, получившей прозвище «Валле-Гранде», он передал изображения, которые были хорошо знакомы ученым миссии: сотовидные текстуры, называемые полигональными трещинами, каждая размером…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавшие на складах в Волгоградской области и 371 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО в течение прошедшей ночи перехватили и уничтожили 371 украинский беспилотник над российскими регионами, а также акваториями Черного и Азовского морей, сообщили в Минобороны РФ. В Волгоградской области в…

В Белгородской области за сутки при ракетном обстреле погиб человек, двое пострадали Человек погиб, двое получили ранения в результате ракетного обстрела поселка Борисовка Белгородской области, сообщает оперштаб региона в Telegram-канале. "Поселок Борисовка Борисовского округа подвергся ракетному обстрелу. В результате попадания снарядов в…

ВС России продолжили наносить удары по портам Украины ВС РФ вечером 30 июля продолжили нанесение ударов по портовой инфраструктуре Украины, поразив в порту Одесса резервуары с горюче-смазочными материалами, предназначенными для ВСУ. Об этом сообщили в Минобороны России. "Вечером…

Тема дня

Азия и Европа для России важны очень по-разному

Для любой страны мира, и Россия тут не исключение, каждый партнер на международной арене важен не са...

Фото

Ученые впервые изучили историю гигантского восточно-гималайского ледника

С помощью сверхчувствительных методов датирования реконструированы процессы подъема и спуска одного ...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Ощущение, что кто-то просыпается и говорит: "Алиса, сделай ещё хуже."

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.