Neuralink підключила Grok до мозку людини — штучний інтелект допоміг живій істоті відновити спілкування з людьми

Neuralink продемонструвала нові можливості мозкового нейроінтерфейсу N1, які дозволили людині з тяжкими порушеннями мови «силою думки» керувати ІІ-агентом Grok, здійснювати телефонні дзвінки та набирати текст на iPhone. Раніше для виконання цих операцій пацієнту доводилося виконувати певні дії, що вимагало зусиль і було доступно не всім. Тепер для цього достатньо подумати: «Привіт, Neuralink!».

Джерело зображення: ШІ-генерація ChatGPT/3DNews

Випробування нових можливостей пройшли в рамках клінічного дослідження VOICE, спрямованого на відновлення здатності спілкуватися у людей, які втратили мову. Одним з учасників демонстрації став чоловік, який використовував імплант для спілкування з оточуючими без вимовляння слів вголос і роботи з фізичною клавіатурою. Нові функції розробили під час 72-годинного інженерного марафону, який фахівці Neuralink провели безпосередньо вдома у учасника дослідження.

Одна з найбільш незвичайних функцій дозволяла запускати ШІ-агента Grok шляхом мисленого вимовляння фрази «Hey Neuralink», після чого користувач також мисленно формулював задачу для ШІ. Система розпізнавала нейронну активність, пов'язану з спробою вимовити ці слова, і передавала команду агенту, який самостійно виконував доручені йому дії на комп'ютері.

Комплекти датчиків N1. Джерело зображень: Neuralink

Ще одне нововведення — автоматичне визначення мовної активності пацієнта. Раніше учаснику доводилося натискати кнопку, щоб почати і завершити запис сигналів мозку для декодування мови. Тепер алгоритм самостійно визначає, коли людина має намір говорити, і включає або зупиняє обробку сигналів. Це позбавляє користувача необхідності керувати процесом вручну.

Інший пакет розробок пов'язаний з інтеграцією нейроінтерфейсу в повсякденні засоби зв'язку. Додаток Bloom навчили передавати синтезовану мову безпосередньо в аудіопотік мікрофона iPhone під час телефонної розмови. Таким чином, співрозмовник чує слова, сформовані комп'ютером на основі нейронних сигналів користувача. Так, під час випробування учасник зміг зателефонувати дружині і поспілкуватися з нею.

Крім того, інженери розробили можливість введення тексту за допомогою сигналів мозку безпосередньо в додатки iOS, прискорили виправлення помилок розпізнавання і додали функцію запуску мовного інтерфейсу з екрану блокування. Для налаштування системи передбачена візуалізація активності мозку в реальному часі: вона показує інтенсивність і розподіл реєстрованих сигналів, допомагаючи користувачу підбирати найбільш ефективні мисленні мовні команди.

Усі перераховані функції поки що є експериментальними розробками і далеко не є готовим комерційним продуктом. Neuralink не опублікувала кількісних показників точності розпізнавання і затримки обробки команд для нових функцій. Дослідження VOICE призначене для людей з тяжкими порушеннями мови, зокрема внаслідок бічного аміотрофічного склерозу, травм спинного мозку та інсульту.

Імплант N1 реєструє електричну активність нейронів, а алгоритми декодування перетворюють її в передбачувані слова або команди. Йдеться не про читання довільних думок, а про розпізнавання мозкової активності, пов'язаної з наміром говорити. Пристрій поки не отримало дозволу FDA на комерційне застосування.

Хочеш дізнатися більше — читай відгуки