16 сентября 2026 г.
Парализованные пациенты получили два канала общения: нейропротез связал речь и жесты
16 сентября 2026 года нейропротез впервые связал речь и жесты у трёх парализованных пациентов через цифрового аватара. Команда UCSF разработала систему на основе ЭКоГ-решётки. Результаты испытаний опубликовали в Nature Neuroscience.
Раньше такие системы передавали только один канал общения: речь или движение. Теперь нейропротез переводит сигналы мозга в речь и жесты цифрового аватара одновременно.
Для людей с БАС и после инсульта ствола мозга это расширяет способ общения. Управление курсором взглядом остаётся рабочим, но идёт медленно, утомляет пациента и не передаёт полноценные жесты или мимику.
Как это устроено. Тонкая ЭКоГ-решётка крепится на поверхности коры, а не вводится в мозговую ткань. Алгоритмы машинного обучения расшифровывают её сигналы и передают команды полноростовому виртуальному аватару.
Учёные записывали активность мозга при раздельной речи и жестикуляции, а затем при одновременном общении. В двухканальном режиме мозг формировал отдельный паттерн, и декодеры, обученные на таких данных, работали точнее.
В испытании цифровой аватар передавал два канала общения одновременно: речь и жесты.
Первоисточник
