Вторник 08 июля 2025 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Математики создали тетраэдр, который всегда приземляется на одну и ту же сторону Четырехсторонняя фигура, которая всегда будет покоиться на одной и той же стороне, независимо от того, на какую сторону она приземляется, была построена математиками спустя десятилетия после того, как впервые было…

Как жара меняет поведение человека, пояснили эксперты Биологи давно подметили, что жара негативно отражается на поведении живых существ. Ряд американских исследований подтверждают, что агрессия у крыс в отношении представителей своего вида активируется при высоких температурах, рассказывает ресурс…

Таинственная надпись на надгробии раскрывает место захоронения графа Дракулы Таинственная надпись, обнаруженная в многовековой гробнице в Неаполе, может наконец-то раскрыть давно потерянное место захоронения графа Дракулы. Исследователи утверждают, что место захоронения, расположенное в часовне Турболо церковного комплекса Санта-Мария-ла-Нова, может…

Интернет и СМИ

Новости СМИ2

Главное за сутки

МО: за ночь над территорией России уничтожили три БПЛА Российские средства ПВО уничтожили три украинских БПЛА над Белгородской областью за ночь. Об этом сообщили в Минобороны России. "В период с 22:30 мск 7 июля текущего года до 7:00 мск…

Трамп заявил, что США будут и дальше поставлять Украине оружие США намерены поставлять Украине оружие. Об этом заявил в понедельник президент США Дональд Трамп, отвечая на вопросы журналистов в начале встречи с премьер-министром Израиля Биньямином Нетаньяху в Белом доме. "Мы…

Нетаньяху номинировал Трампа на Нобелевскую премию мира Премьер-министр Израиля Биньямин Нетаньяху сообщил о номинировании президента США Дональда Трампа на Нобелевскую премию мира. "Хочу передать вам письмо, которое я направил в Нобелевский комитет. Оно номинирует вас на премию…

Тема дня

Почему наша общая история не помогает дружить с соседями

Нам никто не обязан, и мы никому не обязаны. Нам предстоит заново и на чисто прагматической основе д...

Фото

На Аляске на острове Шуяк обнаружены 7000-летние деревни Алутик

Остров Шуяк на Аляске, седьмой по величине из островов Кадьяк, простирается на 168 квадратных киломе...

Опрос

Какое время продлится напряженность в отношениях между Россией и Азербайджаном?

Показать результаты »

Анекдот дня

Когда телефон был привязан к стене, люди были свободны...

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.