Впервые в мире мозг вступил в диалог с ИИ через нейроинтерфейс — видео

Синьхуа: нейроинтерфейс впервые декодировал китайскую речь с точностью 71%
Понимать намерения и речь человека помогает расшифровка гамма-ритмов мозга.
H_Ko/Shutterstock/FOTODOM

Специализирующийся на нейрокомпьютерных интерфейсах (НКИ) китайский стартап NeuroXess завершил два важных этапа клинических испытаний, передает Синьхуа. Одна пациентка с помощью НКИ управляла роботизированной рукой, у другой компьютер успешно расшифровал китайскую речь — все в режиме реального времени.

В августе 2024 года нейрохирурги больницы Хуашань при Фуданьском университете имплантировали 256-канальный высокопроизводительный НКИ 21-летней пациентке с эпилепсией, у которой было объемное поражение в двигательной зоне мозга.

Исследователи научили нейросеть декодировать высокочастотные гамма-ритмы электрокортикограммы, снятой с мозга пациентки, с задержкой менее 60 миллисекунд. Гамма-волны (70-150 Гц) принято связывать со сложным познанием и нейронной синхронизацией. Их расшифровка дает возможность интерпретации намерений человека.

Фото: NeuroXess

Уже через 48 часов после операции пациентка успешно играла в настольный теннис и «Змейку» силой мысли, без каких-либо физических движений. После двух недель обучения она смогла работать с популярными приложениями для смартфонов, такими как WeChat и Taobao, а также управлять системой «умного дома» и инвалидной коляской посредством операционной системы нейрокомпьютера XessOS, что значительно расширило ее возможности в повседневной жизни.

В декабре 2024 года проведено первое в КНР клиническое испытание высокопроизводительного и гибкого НКИ для синтеза китайской речи. Язык — самая сложная когнитивная функция человека. Особенно китайский — односложный, тональный и логографический, — обработка которого задействует больше областей мозга по сравнению с английским и другими на основе алфавитной письменности. 

В этом случае пациентке с эпилепсией и опухолью в речевой области мозга также имплантировали 256-канальный НКИ. За пять дней она восстановилась и достигла точности расшифровки 142 распространенных китайских слогов 71% с задержкой до 100 мс.

NeuroXess продемонстрировала впечатляющие достижения на видео. На кадрах пациенты силой мысли выдают на экран иероглифы «Рад познакомиться» и управляют роботизированными руками, чтобы схватить яблоко и грушу, а также поздравить с Новым 2025 годом языком жестов.

Устройство также позволило пациенту управлять цифровым аватаром, чтобы сказать «Привет» и взаимодействовать с большой языковой моделью. По утверждению стартапа, это первый в мире диалог «разум — искусственный интеллект».

В прошлом году Илон Маск объявил, что его стартап Neuralink имплантировал человеку НКИ и эксперимент показал многообещающие результаты. По словам основателя NeuroXess Ху Тао, используемые его компанией методики менее травматичны.