Архетипическая психосоматика

Как связаны тело, сны, мысли и жизненные события

Говорить и жестикулировать одновременно: исследование с нейроинтерфейсом

Нейроинтерфейс речи и жестов: виртуальный аватар с поднятой рукой на мониторе и модель электродной решётки.

Рубрика: Мозг и нейротехнологии

Нейроинтерфейс речи и жестов проверили в исследовании, опубликованном 14 сентября 2026 года в Nature Neuroscience: один кортикальный имплант поддерживал одновременное декодирование речи и жестов у людей с параличом. NIH представил работу 7 октября.

Нейроинтерфейс речи и жестов: один имплант, несколько действий

Команда Эдварда Чанга использовала электрокортикографию: массив электродов записывал сигналы с поверхности мозга. Программа переводила их в команды для персонального виртуального аватара.

В исследовании участвовали три человека с тяжёлым нарушением движений речевого аппарата. Система распознавала попытки движений верхней части тела, рта и лица. Аватар использовали двое из трёх участников: третий выбыл до этих экспериментов. Совместные тесты речи и жестов тоже проводили с двумя участниками. Затем параллельные декодеры позволили сочетать речь и жесты, вместо того чтобы изучать их только по отдельности.

Какая точность и на каком словаре

По сообщению NIH, при копировании одних жестов точность достигала 82%, а при одновременных речи и жестах составляла 65–70%. По данным статьи, эти показатели в реальном времени получены у одного участника, на небольшом наборе: 10 жестов, 10 фраз и 100 их сочетаний. Это не результат свободной беседы.

Почему обучение пришлось изменить

Модели, обученные лишь на изолированных действиях, не автоматически переносили этот опыт на одновременную речь и жестикуляцию. Добавление примеров обоих режимов улучшало работу системы в разных условиях.

Что исследование не доказывает

Это важный технический результат, но пока доказательство возможности на небольшой группе. Нельзя превращать его в обещание восстановить коммуникацию любому пациенту. По сообщению NIH, система оставалась проводной; переход к полностью имплантируемому беспроводному варианту — дальнейшая задача.

Здесь декодировались сигналы при попытках конкретных действий. Работа не демонстрирует произвольного чтения всех мыслей человека.

Другой способ регистрации активности — ЭЭГ при бессоннице. Это иной метод и иная задача. Для оценки обещаний полезен также материал о границах метода. Другие свежие разборы — в разделе «Новости».

Источники

Источники проверены: 13.10.2026.