Суббота 08 августа 2026 года

Вы здесь: Главная» Все новости» Наука» Нейросеть научилась переводить текст в жестовую речь

Нейросеть научилась переводить текст в жестовую речь

Вторник, 01 Декабря 2020 12:01

Разработчики из Великобритании научили нейросеть превращать текст в видео, на котором человек произносит этот же текст на языке жестов. Статья, посвященная новому алгоритму, приближенному к искусственному интеллекту, появилась на портале arXiv.org.

В отличие от существующих алгоритмов такого типа, новая разработка британских ученых проверяет результаты своей работы после отрисовки видео — за счет этого качество работы растет на порядок. О том, как устроена технология, рассказали ее авторы — ученые под руководством Ричарда Боудена из Университета Суррея.

"Особенность нашего алгоритма — более качественный синтез кистей, которые очень важны для корректной передачи информации при помощи жестовых языков. ИИ принимает данные в виде текста и создает скелетную модель тела, которая используется для передачи текста в виде жестов", — говорит Боуден, добавляя, что для переноса векторных движений на реалистичное видео используется сверточная нейросеть U-Net.

Результаты нейросети размечались при помощи алгоритма OpenPose. Алгоритм сравнивал свои результаты с результатами аналогичной работы, проделанной людьми, и совершенствовался, достигнув в итоге значительного прогресса. Авторы технологии говорят, что речь идет о самом качественном в мире ИИ-сурдопереводчике — новый алгоритм значительно превосходит существующие аналоги.

Колесников Андрей Опубликовано в Наука

Читайте также

Nature: галактики действительно начинают вращаться еще до своего рождения Почему галактики вращаются? Этот вопрос мучает астрономов уже около 100 лет, с тех пор как было обнаружено, что туманные вращающиеся сгустки на ночном небе на самом деле являются спиральными галактиками,…

Осетр может прожить более 400 лет — намного дольше, чем считалось В Северной Америке обитает рыба, которая может вырасти до размеров самого высокого человека и иметь вес, равный его росту. Считалось, что эти озерные чудовища доживают до невероятного возраста — около…

Жизнь на Земле могла возникнуть из неживой материи сразу дважды Сам факт нашего существования — это череда удивительных случайностей, история которых насчитывает более 4 миллиардов лет. Одной из самых больших трудностей была самая первая: как жизнь возникла из первобытного бульона…

Интернет и СМИ

Новости СМИ2

Главное за сутки

МО: за ночь над регионами России сбили 397 украинских БПЛА Российские средства ПВО перехватили и уничтожили за ночь над регионами РФ и акваторией Азовского моря 397 украинских БПЛА. Об этом сообщили в Минобороны России. "В течение прошедшей ночи дежурными силами…

ВС России ударили по предприятию военной промышленности и складу ГСМ в Киеве Российские военные ночью нанесли групповой удар по предприятию военной промышленности и складу ГСМ в Киеве. Об этом сообщили в Минобороны России. "Сегодня ночью Вооруженными силами Российской Федерации нанесен групповой удар…

В России с 1 марта 2027 года банки будут отказывать в переводах при вредоносном ПО Российские банки с 1 марта 2027 года будут отказывать клиентам в переводе денег, если на их устройстве обнаружено вредоносное программное обеспечение (ПО), следует из Федерального закона № 210-ФЗ от 26…

Тема дня

Три исламских государства окончательно потеряли надежду на США

Турция, Пакистан и Саудовская Аравия создали совместный военный блок. Уже можно встретить термин «Ис...

Фото

Ветеринар объяснил, почему собаки наклоняют голову при взгляде на хозяина

Момент, когда собака наклоняет голову, устремив взгляд на своего хозяина, мгновенно узнаваем. Владел...

Опрос

Кто первый посягнет на западные регионы Украины?

Показать результаты »

Анекдот дня

Ощущение, что кто-то просыпается и говорит: "Алиса, сделай ещё хуже."

Еще »

Этот сайт использует файлы «cookie» с целью повышения удобства его использования. Во время посещения сайта вы соглашаетесь с тем, что мы обрабатываем ваши персональные данные с использованием сервиса «Яндекс. Метрика». Продолжая использовать сайт, вы соглашаетесь с Политикой конфиденциальности.