Четверг 26 марта 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Неандертальцы находились на грани выживания в течение 350 000 лет От 400 000 до 45 000 лет назад неандертальцы занимали большую часть Евразии, охотясь на крупную дичь, собирая растения, искусно обрабатывая каменные орудия и изготавливая одежду из шкур животных. Но…

CR: Выявлена нестандартная причина гипертонии Учеными обнаружена область мозга, которой может принадлежать ключевая роль в развитии гипертонии. Это латеральная парафациальная зона — участок ствола мозга, отвечающий за основные функции организма: дыхание и сердечный ритм. Работу…

Радикальное 20-летнее исследование показывает, что клонирование достигло предела Ученые довели возможности клонирования млекопитающих до предела, пока вся карточная конструкция не рухнула. Результаты исследования были опубликованы в журнале Nature Communications. После двух десятилетий непрерывной работы японские исследователи обнаружили генетический…

Интернет и СМИ

Новости СМИ2

Главное за сутки

МО: за ночь над регионами России сбили 389 украинских БПЛА Средства ПВО за ночь перехватили и уничтожили над российскими регионами 389 украинских БПЛА, сообщили в Минобороны РФ. В Усть-Луге в зоне порта ведется локализация возгорания. Несколько жилых домов и автомобилей…

В Барнауле задержали «юристов», обманывающих родственников пропавших без вести участников СВО "Юристов", обманывающих семьи пропавших без вести участников СВО, задержали в Барнауле. Возбуждено уголовное дело, сообщила помощник прокурора Алтайского края Мария Антошкина. "Индивидуальным предпринимателем в городе Барнауле был арендован офис, где…

Запрет на нефть из России откладывается. Что известно о новой позиции Евросоюза Евросоюз передумал рассматривать вариант полного запрета на импорт нефти из России на фоне военной операции США и Израиля против Ирана, сообщило издание L'AntiDiplomatico. ТАСС собрал основное о ситуации. Решение ЕС…

Тема дня

Саудовскую Аравию затягивают в войну с Ираном ради чистого зла

Саудовская Аравия желает стать полноценным участником нападения на Иран, чтобы довести операцию США ...

Фото

В Нидерландах, вероятно, обнаружены останки знаменитого мушкетера д'Артаньяна

Возможность обнаружения места последнего упокоения одной из самых легендарных фигур европейской исто...

Опрос

Как долго продлится операция США против Ирана?

Показать результаты »

Анекдот дня

Когда я рассказал племяннику одиннадцати лет, что в его годы мы с друзьями во время ледохода катались на льдинах, он спросил: "Дядя, ты что, в детстве совсем тупой был?".

И тут я чего-то решил про догонялки на деревьях, карбид в бутылках, прыжки со второго этажа стройки в сугроб и взрывание дихлофоса в костре не рассказывать...

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.