Суббота 04 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Поставлено под сомнение главное оружие охотников на мамонтов В научной среде долго бытовало мнение, что в древности охотники Северной Америки охотились на мамонтов и другую мегафауну при помощи атлатля — метательного приспособления, которое использует рычаг для увеличения скорости…

Ученые выяснили, почему Алеутские острова резко поднялись миллионы лет назад Новое исследование показало, что Алеутские острова Аляски резко поднялись в период от пяти до семи миллионов лет назад, примерно в одно и то же время поднявшись по всей цепочке островов…

Случайные колебания времени могут помочь разгадать величайшую загадку гравитации Самый сложный вопрос в физике на данный момент — это то, как общая теория относительности — законы, управляющие гравитацией и пространством-временем в больших масштабах — сочетается с квантовой механикой, законами,…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Президент Путин провел совещание в пункте объединенной группировки. Главное Президент России Владимир Путин посетил один из вспомогательных пунктов Объединенной группировки войск в зоне СВО. Российский лидер отметил, что стратегическая инициатива сохраняется за вооруженными силами РФ. Путин поручил проанализировать вовлеченность…

МО: за ночь над регионами России уничтожили 389 украинских БПЛА Средства ПВО за ночь на субботу перехватили и уничтожили 389 украинских беспилотников над регионами России, акваториями Черного и Азовского морей. Об этом сообщили в Минобороны РФ. "В течение ночи в…

Хинштейн: за сутки артиллерия ВСУ 93 раза обстреляла Курскую область, также сбиты 123 БПЛА Артиллерия ВСУ обстреляла 93 раза приграничье Курской области, в регионе сбито 123 беспилотника ВСУ разного типа. Об этом сообщил губернатор Александр Хинштейн. "Всего в период с 9:00 3 июля до…

Тема дня

Юбилей США не радует даже самих американцев

США празднуют 250-летний юбилей в ужасном настроении. Только половина американцев испытывают гордост...

Фото

Бракованный слиток привел к раскрытию тайны свинцовоплавильной мастерской

Первые систематические раскопки на холме массива Ротааргебирге, недалеко от города Брилон в немецком...

Опрос

Что будет с дальнейшими поставками российского газа в Армению?

Прекратятся полностью - 52.1%

Продолжатся, но уже без скидок, по мировым рыночным ценам - 16.5%

Все останется без изменений - 14.7%

Всего голосов:: 1726

Показать результаты »

Анекдот дня

Всегда смущало наличие в ПДД гужевой повозки. Сейчас вообще вопросов не возникает.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.