Neuralink проверила управление компьютером через Grok в 72-часовом тесте дома
Neuralink продемонстрировала новые возможности речевого нейроинтерфейса в клиническом исследовании VOICE. Участник с боковым амиотрофическим склерозом, утративший способность двигаться и говорить, смог передавать компьютеру команды без голоса и клавиатуры.
Инженеры проверяли функции в течение 72 часов у него дома.
Чтобы обратиться к Grok, участник мысленно произносит «Эй, Neuralink», а затем формулирует задачу. Система распознаёт сигналы, связанные с попыткой произнести слова, и передаёт запрос агенту. Grok выполняет действия в операционной системе компьютера. Команды поступают через имплант, а не через микрофон.
Neuralink также добавила автоматическое распознавание намерения заговорить. Раньше участнику требовалось нажимать кнопку, чтобы начать и остановить декодирование речи; теперь система определяет эти моменты по сигналам импланта. Речевым интерфейсом можно пользоваться без ручного переключения. Новую функцию испытали вместе с управлением ИИ-агентом.
Связь импланта Neuralink с iPhone
Neuralink проверила и связь импланта с iPhone. Приложение Bloom преобразует сигналы мозга в синтезированную речь и передаёт её прямо в аудиопоток телефонного звонка. Собеседник слышит голос во время обычного разговора. В ходе испытания участник позвонил жене; в начале звонка система может автоматически объяснить, что человек использует вспомогательное устройство для общения.
Участник также набирал текст в приложениях iPhone с помощью сигналов мозга. Разработчики ускорили исправление ошибок распознавания в Bloom и добавили возможность запускать речевой интерфейс с экрана блокировки, не разблокируя смартфон. Среди проверенных сценариев было и оформление заказа еды. Функции показали в эксперименте; купить их пока нельзя.
Во время работы инженеры вывели на экран визуализацию сигналов импланта: она показывает их интенсивность и распределение. На ней видно, какие мысленно представляемые действия вызывают более выраженную активность. Эти данные помогают настраивать модели, преобразующие нейронные сигналы в речь и команды. Интерфейс распознаёт активность, связанную с намерением говорить, а не произвольные мысли человека.
Neuralink отдельно сообщила о раннем результате речевого интерфейса: один из участников в первую неделю использования набирал 75 английских слов в минуту при доле ошибок 5,8%. Этот показатель относится к одному человеку и не характеризует точность новых функций у всех участников. Для управления Grok компания не опубликовала количественных данных о точности распознавания команд и задержке их обработки. Имплант пока не получил разрешения FDA на коммерческое применение.
В мае 2025 года мы рассказывали, как пациент с БАС редактировал видео мыслями с помощью Neuralink и озвучивал текст синтезированным голосом. Нынешнее исследование продолжает демонстрацию возможностей нейроинтерфейса для общения и управления компьютером без движений.
