Американские нейрофизиологи сделали важный шаг в разработке нейрокомпьютерных интерфейсов. Они создали систему, которая дает возможность полностью парализованным людям общаться с помощью мысли.
Устройство позволяет декодировать речевые сигналы из мозга. Специальный имплант с 253 электродами устанавливают в речевые центры коры головного мозга. Он фиксирует нейронную активность, когда человек мысленно произносит слова. Затем алгоритмы машинного обучения преобразуют эти сигналы в речь или текст, которые выводятся на экран или озвучиваются синтезатором практически без задержки.
Преимущество этой системы — в ее скорости и точности. В отличие от предыдущих разработок, новая технология позволяет распознавать до 48 слов в минуту. Также устройство приближает скорость общения к обычной человеческой речи. В тестах система успешно распознавала больше тысячи слов, Результаты исследования были опубликованы в журнале Nature Neuroscience.
Такое достижение стало возможно благодаря использованию передовых нейросетевых архитектур типа RNN-T, которые обычно применяются для обработки живой речи в онлайн-переводчиках. Эти алгоритмы адаптировали для работы с нейронными сигналами, что позволило добиться высокой точности и скорости расшифровки.
Первой испытательницей технологии стала 47-летняя американка, которая потеряла возможность двигаться после инсульта 18 лет назад. Эксперимент показал, что система правильно распознает слова и сохраняет интонацию, благодаря чему общение становится более естественным.