Четверг 16 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

На гобелене из Байё действительно изображена комета Галлея Гобелен из Байё — одно из самых известных текстильных произведений в мире, и впервые за более чем 900 лет он вернулся в Англию, чтобы быть выставленным в Британском музее. Произведение…

ДНК арахиса, банана, кошки и курицы обнаружили на Туринской плащанице Исследователям удалось извлечь из Туринской плащаницы больше ДНК, чем можно было бы ожидать найти на изрядно поношенном пледе для пикника: по генетическим пятнам, оставшимся на старой ткани, были идентифицированы все…

В челюстях морских червей обнаружен твердый, но легкий «биометалл» Челюсти некоторых морских червей состоят из исключительно твердого, но легкого материала, получившего название «биометалл», который может найти применение в технике. Результаты исследования были опубликованы в журнале Biophysics Reviews. Perinereis cultrifera…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Погибший в Ярославской области и 375 БПЛА. Последствия атак ВСУ на российские регионы Средства ПВО за ночь уничтожили 375 украинских беспилотников над российскими регионами, сообщили в Минобороны РФ. Один мужчина погиб, четверо пострадали после атаки БПЛА ВСУ на Ярославскую область. Пострадавшие есть в…

Поражены предприятия ВПК Украины и порты в Одесской области. Новые групповые удары ВС РФ ВС России в ночь на 16 июля нанесли групповые удары по предприятиям ВПК в Киеве и объектам в портах Одесской области, сообщили в Минобороны РФ. ТАСС собрал основное о результатах…

Гибель главного инженера ЗАЭС. Главное о теракте ВСУ 15 июля ударили дроном по служебному автомобилю ЗАЭС, в результате погиб главный инженер станции Александр Яковлев и водитель. Об этом журналистам заявил глава Росатома Алексей Лихачев. ТАСС собрал основное…

Тема дня

У Запада остались силы только ломать существующие правила

На Черном море и в Персидском заливе страны Запада стремительно разрушают международные режимы и пра...

Фото

Цари Урарту 28000 лет назад превратили бронзовые чаши в средства пропаганды

Более 100 бронзовых чаш с выгравированными именами урартских царей были не просто элитной посудой. Н...

Опрос

Как вы оцениваете риск возникновения военного конфликта в Молдавии и Приднестровье?

Показать результаты »

Анекдот дня

Парадокс нашего времени, молодым человеком могут считать лет до 40, при этом кризис среднего возраста может наступить в 30.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.