Четверг 02 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Младенцы рождаются с нейронными основами для математики Младенцы рождаются с врожденным чувством чисел, и теперь впервые были выявлены мозговые механизмы, лежащие в основе этой способности. В течение нескольких дней или даже часов после рождения группа младенцев смогла…

Древняя окаменелость рыбы сохранила свой мозг на протяжении 300 млн лет Большинство ископаемых останков содержат лишь кости и ничего больше. Лишь немногие сохраняют нечто гораздо более хрупкое. Более 300 миллионов лет назад крошечная рыбка размером с пескаря опустилась в ил доисторического…

PLOS One: Отпустить проблему поможет написание истории о неудачных отношениях Психологам давно известно, что проговаривание проблемы может делать ее намного менее катастрофичной. Польские специалисты решили проверить, что изменится, если трансформировать проговаривание в нарратив — полновесный рассказ с сюжетом и персонажами.…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Погибший в Нижегородской области и 327 сбитых БПЛА. Последствия атак ВСУ на российские регионы Российские средства ПВО за минувшую ночь перехватили и уничтожили 327 украинских беспилотников, сообщили в Минобороны РФ. Мирный житель погиб в результате атаки ВСУ при помощи беспилотников на Нижегородскую область, заявил…

Ответный массированный удар ВС России по Украине. Главное Вооруженные силы России в ответ на украинские террористические атаки нанесли массированный удар, поражены предприятия военной промышленности, ТЭК и инфраструктура военных аэродромов. Об этом сообщили в Минобороны РФ. ТАСС собрал основное…

Шуваев: за сутки в Белгородской области при атаках ВСУ погибли два человека ВСУ атаковали территорию Белгородской области 62 раза за прошедшие сутки. В результате атак в Валуйском и Вейделевском округах погибли два мирных жителя, еще девять получили ранения в Борисовском, Валуйском, Вейделевском,…

Тема дня

Поляки быстро и эффектно заменили Украину на Турцию

Президент Польши Кароль Навроцкий проявил изрядную прыть: не только вызвал к себе народную любовь че...

Фото

Около половины случаев деменции можно предотвратить

Специалисты уверены, что почти половину случаев деменции можно предотвратить, если устранять несколь...

Опрос

Что будет с дальнейшими поставками российского газа в Армению?

Прекратятся полностью - 52.1%

Продолжатся, но уже без скидок, по мировым рыночным ценам - 16.5%

Все останется без изменений - 14.7%

Всего голосов:: 1726

Показать результаты »

Анекдот дня

Всегда смущало наличие в ПДД гужевой повозки. Сейчас вообще вопросов не возникает.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.