Имплантат мозга переводит речь и жесты в реальном времени

Материал подготовлен искусственным интеллектом на основе нескольких источников — ссылки на оригиналы приведены ниже.
Исследователи разработали имплантат мозга, который одновременно декодирует речь и жесты в реальном времени. Устройство, описанное в Nature Neuroscience, использует ИИ для преобразования сигналов мозга в текст и анимацию аватара. Оно было испытано на двух участниках с параличом.
Ключевые факты
- Имплантат использует 253 электрода, размещённых на коре головного мозга, для захвата сигналов, связанных с речью и движениями тела.
- Первый участник имел нарушения речи и движений после инсульта ствола мозга.
- Второй участник страдал боковым амиотрофическим склерозом, вызвавшим прогрессирующий паралич речи и двигательные нарушения.
- Система является доказательством концепции, направленной на создание более многофункциональных ИМК, передающих больше выразительности.
Конструкция устройства
Устройство представляет собой хирургически имплантированную матрицу из 253 электродов, размещённых на поверхности коры головного мозга. Оно покрывает довольно большую площадь сенсомоторной коры, захватывая сигналы, связанные как с речью, так и с движениями тела. Искусственный интеллект преобразует электрическую активность мозга в текст, отображаемый на экране, и управляет персонализированным анимированным аватаром.
Тестирование участников
Первый участник имел нарушения речи и движений после инсульта ствола мозга. Исследователи попросили его беззвучно произнести пять фраз и попытаться помахать рукой, кивнуть, пожать руки и похлопать. Второй участник страдал боковым амиотрофическим склерозом, вызвавшим прогрессирующий паралич речи и двигательные нарушения. Его попросили произнести десять фраз и представить десять жестов, таких как пожатие плечами и поднятый большой палец.