Нейросети сумели преобразовать сигналы мозга в человеческую речь

Американские ученые создали систему, преобразующую сигналы головного мозга человека в звуки речи. Разработка, основанная на двух нейронных сетях и речевом синтезаторе, позволяет вернуть речь парализованным.

Существующие системы такого рода обычно базируются на считывании движений глаз или головы и позволяют парализованным людям управлять, например, компьютерным курсором. Но общение, основанное на наборе символов курсором — это весьма медленный и непрактичный процесс, который в целом очень сильно уступает естественной коммуникации.

Исправить ситуацию могут интерфейсы, позволяющие мозгу взаимодействовать с компьютером напрямую.

"Мы разработали прототип такой системы на основе двух рекуррентных нейронных сетей и синтезатора речи. Применение двухступенчатой системы обусловлено тем, что кора головного мозга не оперирует словами напрямую — она посылает сигналы к органам речи, которые уже отвечают за генерацию слов", — рассказывают сотрудники Калифорнийского университета в Сан-Франциско.

Первые тесты показали, что система работает, однако ее эффективность пока что далека от идеальной. Ученые, соответственно, планируют развивать проект.

"Устройства, которые будут расшифровывать речь по сигналам мозга в режиме реального времени — это то, что действительно необходимо парализованным людям, поэтому мы не собираемся останавливаться на достигнутом", — добавляют авторы разработки.