Пятница 31 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

У странного трёхлопастного астероида есть свой крошечный спутник Астрономы обнаружили один из самых странных на вид астероидов, которые мы когда-либо видели. Этот космический камень, получивший название 44 Ниса, был обнаружен в 1857 году, но только сейчас у ученых…

Груз с затонувшего корабля раскрывает удивительные торговые секреты 1600-х годов В ходе нового исследования, проведенного под руководством Университета Кертина с использованием груза, поднятого с одного из самых печально известных кораблекрушений в Австралии, было выявлено, насколько удивительно сложными были глобальные цепочки…

Марсоход Curiosity обнаружил огромное поле с сотовой текстурой Когда марсоход НАСА Curiosity («Кьюриосити») недавно начал подниматься по марсианской долине, получившей прозвище «Валле-Гранде», он передал изображения, которые были хорошо знакомы ученым миссии: сотовидные текстуры, называемые полигональными трещинами, каждая размером…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Пострадавшие на складах в Волгоградской области и 371 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО в течение прошедшей ночи перехватили и уничтожили 371 украинский беспилотник над российскими регионами, а также акваториями Черного и Азовского морей, сообщили в Минобороны РФ. В Волгоградской области в…

В Белгородской области за сутки при ракетном обстреле погиб человек, двое пострадали Человек погиб, двое получили ранения в результате ракетного обстрела поселка Борисовка Белгородской области, сообщает оперштаб региона в Telegram-канале. "Поселок Борисовка Борисовского округа подвергся ракетному обстрелу. В результате попадания снарядов в…

ВС России продолжили наносить удары по портам Украины ВС РФ вечером 30 июля продолжили нанесение ударов по портовой инфраструктуре Украины, поразив в порту Одесса резервуары с горюче-смазочными материалами, предназначенными для ВСУ. Об этом сообщили в Минобороны России. "Вечером…

Тема дня

Азия и Европа для России важны очень по-разному

Для любой страны мира, и Россия тут не исключение, каждый партнер на международной арене важен не са...

Фото

Археологи обнаружили на Сардинии одну из древнейших гробниц гигантов

Находка, обнаруженная на южном склоне Красту Литту на высоте 740 метров, оставалась скрытой под густ...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Ощущение, что кто-то просыпается и говорит: "Алиса, сделай ещё хуже."

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.