Neuralink навчила керувати Grok і телефонувати за допомогою думок.
Компанія Neuralink, заснована Ілоном Маском, продовжує розширювати можливості своїх мозково-комп'ютерних інтерфейсів. Тепер користувачі експериментального імпланта можуть взаємодіяти зі штучним інтелектом Grok, надсилати повідомлення зі смартфона та телефонувати іншим людям, використовуючи лише сигнали мозку.
Нові функції випробували за участю людини з порушеннями мовлення в межах клінічного дослідження VOICE. Головна мета розробки — допомогти людям, які через захворювання або травми втратили можливість самостійно говорити та користуватися звичайними пристроями.
Про випробування повідомляє Interesting Engineering.
Керування Grok за допомогою думок
Однією з найцікавіших можливостей стала інтеграція імпланта Neuralink із ШІ-агентом Grok. Щоб активувати його, користувачеві достатньо подумки сформулювати фразу «Hey Neuralink».
Після активації людина може уявно сформулювати команду, яку система передасть штучному інтелекту для виконання. Таким чином, взаємодія з ШІ відбувається без клавіатури, миші та голосових команд.
Для розпізнавання намірів Neuralink використовує нейронні сигнали, пов'язані зі спробами мовлення. Імплант аналізує активність мозку та перетворює її на команди, зрозумілі цифровим системам.
Імплант сам розпізнає намір говорити
Ще одним нововведенням стала система Neural Voice Activity Detection. Вона автоматично визначає, коли користувач намагається сформулювати слова подумки, і відповідно запускає або припиняє процес декодування мовлення.
Раніше для початку роботи потрібно було натискати фізичну кнопку. Новий підхід дозволяє відмовитися від цього додаткового кроку та зробити спілкування зручнішим.
Крім того, розробники додали можливість переглядати нейронну активність у реальному часі. Спеціальна візуалізація демонструє інтенсивність і розподіл сигналів, які отримує імплант. Це допомагає учасникам дослідження краще розуміти роботу системи та експериментувати з різними моделями уявного мовлення.
Телефонні дзвінки та повідомлення без голосу
Neuralink також працює над інтеграцією імпланта зі смартфонами. Одна з випробуваних функцій дозволяє здійснювати телефонні дзвінки без фізичного вимовляння слів.
Система передає синтезований голос безпосередньо до аудіоканалу мікрофона смартфона. У результаті співрозмовник чує згенероване мовлення, хоча користувач не промовляє жодного слова.
Під час демонстрації один з учасників дослідження зміг зателефонувати своїй дружині за допомогою імпланта. Для пари цей момент мав особливе значення, адже їхні стосунки свого часу почалися саме з телефонних розмов.
Також Neuralink випробувала інтеграцію з клавіатурою iOS. Завдяки цьому користувачі можуть створювати повідомлення та вводити текст у різних застосунках, не торкаючись екрана.
Подібні можливості можуть стати важливими для людей з аміотрофічним бічним склерозом (БАС), який поступово позбавляє їх здатності рухатися та говорити.
Розробники тестували функції вдома в учасника дослідження
Нові можливості створювали не лише в лабораторних умовах. Інженери Neuralink провели 72-годинну робочу сесію безпосередньо вдома в одного з учасників клінічного дослідження VOICE.
Разом із ним та його дружиною фахівці розробляли прототипи, перевіряли їх у повсякденному використанні та оперативно вносили зміни відповідно до отриманих відгуків.
Серед результатів роботи — оновлення мобільного застосунку Bloom, який використовується для взаємодії з мовленнєвим мозково-комп'ютерним інтерфейсом. У ньому покращили інструменти редагування тексту, щоб користувачі могли швидше виправляти помилки розпізнавання.
Ще одним нововведенням стала можливість спілкуватися через екран блокування iPhone. Тепер для цього не потрібно спочатку розблоковувати смартфон і відкривати відповідний застосунок.
Чи готова Neuralink до масового використання
Попри вражаючі демонстрації, технологія Neuralink усе ще перебуває на експериментальному етапі. Мозкові імпланти компанії не отримали дозволу Управління з контролю за продуктами та ліками США (FDA) на широке комерційне використання.
Крім того, Neuralink поки не опублікувала детальних кількісних результатів випробувань нових функцій. Залишаються відкритими питання щодо точності розпізнавання уявного мовлення, швидкості виконання команд і частоти помилок.
Тому можливість керувати Grok, писати повідомлення та телефонувати за допомогою думок поки залишається демонстрацією перспективної технології, а не готовим рішенням для масового використання.
Мітки: безпечний інтернет, ШІ, штучний інтелект