Пятница 03 июля 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Поставлено под сомнение главное оружие охотников на мамонтов В научной среде долго бытовало мнение, что в древности охотники Северной Америки охотились на мамонтов и другую мегафауну при помощи атлатля — метательного приспособления, которое использует рычаг для увеличения скорости…

Постапокалиптическая планета доказывает, что Земля может пережить гибель Солнца Из всех странных миров в нашей галактике Млечный Путь, одними из самых загадочных являются те, что находятся вокруг белых карликов. Это не обычные звезды, занятые столкновением атомов в своих ядрах,…

Ученые разгадали тайну смерти братьев Медичи, опровергнув теорию отравления Международная группа исследователей успешно секвенировала ДНК скелетных останков братьев Джованни и Франческо де Медичи, обнаружив ранее неизвестный штамм паразита Plasmodium falciparum и подтвердив, что причиной их смерти стала малярия. В…

Интернет и СМИ

Новости СМИ2

Главное за сутки

Женщина погибла во время ракетного удара по Белгороду, пожар под Смоленском и 155 БПЛА. Последствия атаки ВСУ на российские регионы Средства ПВО за минувшую ночь перехватили и уничтожили 155 украинских беспилотников самолетного типа над российскими регионами и акваториями Азовского и Черного морей. Об этом сообщили в Минобороны РФ. Пожар произошел…

Ковальчук: в Брянской области из-за атаки дрона-камикадзе погиб мужчина ВСУ атаковали Брянскую область с применением дронов, один человек погиб, двое получили ранения. Об этом сообщил в Telegram-канале врио губернатора региона Егор Ковальчук. "В результате атаки дрона-камикадзе в селе Борщово…

Хинштейн: машина с сотрудниками администрации Рыльского района Курской области подорвалась на мине Автомобиль с сотрудниками администрации Рыльского района Курской области подорвался на мине, ранен глава района Владимир Ковальчук. Об этом сообщил губернатор региона Александр Хинштейн. Машина подорвалась утром в центре города. "Взрывное…

Тема дня

Поляки быстро и эффектно заменили Украину на Турцию

Президент Польши Кароль Навроцкий проявил изрядную прыть: не только вызвал к себе народную любовь че...

Фото

Эволюцию вирусов длиной в 250 млн лет раскрыли благодаря растениям

Можно ли восстановить историю вирусов, что появились несколько сотен миллионов лет назад? Ответ на в...

Опрос

Что будет с дальнейшими поставками российского газа в Армению?

Прекратятся полностью - 52.1%

Продолжатся, но уже без скидок, по мировым рыночным ценам - 16.5%

Все останется без изменений - 14.7%

Всего голосов:: 1726

Показать результаты »

Анекдот дня

Всегда смущало наличие в ПДД гужевой повозки. Сейчас вообще вопросов не возникает.

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.