Відстань між кремнієвими чіпами та синапсами скорочується. У міру зростання обчислювальної потужності та поглиблення наших знань про нервову систему наукова фантастика скидає свій костюм та стає більш конкретною. Йдеться не про більш швидке прокручування або розумніших голосових помічників. Для людей з важкими формами інвалідності інтерфейси «мозок-комп’ютер» (BCI) є потенційною революцією в області автономності. Це рятівне коло.
Уявіть, що ви відправляєте зорову чи слухову інформацію безпосередньо до кори мозку. Уявіть, що ви можете керувати роботизованою рукою, інвалідним візком або курсором одним лише своїм наміром. Нема кнопок. Немає перемикачів. Просто подумайте. Ми докладніше розглянемо, як ці системи перетворять електрику на дію, де виникають збої та які перспективи майбутнього.
Електронний мозок
Інтерфейси «мозок-комп’ютер» працюють, тому що мозок за своєю суттю є електричною машиною. Це щільна мережа нейронів. Ці клітини з’єднані дендритами та аксонами. Кожна пам’ять, дія та почуття викликають тут активність. Швидкість вражає: сигнали передаються від клітини до клітини зі швидкістю до 250 миль на годину.
Ці імпульси генеруються різницею іонів через мембрану нейронів. Це електричний потенціал. Мієлін ізолює шляхи та запобігає перехресним перешкодам. Однак ізоляція не ідеальна. Частина електричного шуму просочується назовні. Дослідники відстежують цей витік. Вони декодують патерни. Потім поєднують їх із зовнішніми командами.
Потік двосторонній. Це не просто читання намірів. Це також обернена передача відчуттів. Згадайте ваш зір. Коли ви бачите червоний колір, ваш зоровий нерв генерує певні патерни. Дослідники можуть відтворити цей сигнал. Підключіть камеру. Сигнал виявлення червоного кольору подається безпосередньо в мозок. Сліпі люди можуть сприймати колір, навіть якщо їхня сітківка не працює, минаючи несправне «залізо».
Введення/виведення BCI
Інтерфейс складається із двох різних частин. Введення зчитує мозок. Висновок впливає світ.
Система введення захоплює нейронні дані. Вони мають бути досить чутливими, щоб уловлювати слабкі електричні «шепіти» навіть у постійному шумі біологічної активності. Завдання полягає у фільтрації. Мозок «гучний». Кожне серцебиття та вдих викликають перешкоди. Алгоритм має ізолювати конкретні патерни сплесків, що відповідають наміру.
Системи виведення виконують команду. Щойно бажання мозку декодовано, BCI переводить їх у дію. Роботизована рука стискається. Текстове поле заповнюється. Дрон нахиляється вліво. Точність залежить виключно від того, наскільки добре інтерпретовано введення.
Існують інвазивні та неінвазивні шляхи. Інвазивні методи, такі як імплантовані електроди забезпечують високоточні сигнали, але вимагають хірургічного втручання. Неінвазивні шапочки простіше у використанні – вони розташовуються на шкірі голови, але якість даних менш чітка. Вибір визначає, хто має доступ до технології та наскільки надійні елементи управління.
Який шлях переможе? Це залежить від потреб користувача. Хірургам, які потребують міліметрової точності, можна вдатися до ризик імплантації. Гравцю, який керує грою силою думки, достатньо пов’язки на голову. Хоча технологія дозріває, компроміси, як і раніше, очевидні.
Мета полягає непросто у читанні думок. Йдеться про створення двостороннього зв’язку між розумом та машиною.
Наслідки виходять за межі медичних застосувань. Навчання комп’ютерів розуміння нейронного синтаксису відчиняє двері для посилення пам’яті, розширення чутливості і навіть нових форм комунікації. Але «залізо» – це лише половина справи. Програмне забезпечення має інтерпретувати хаос.
В даний час BCI незграбні. Вони вимагають калібрування. Вони «втомлюються».
Декодування сигналу: від датчиків на скальпі до імплантатів у мозок
Апаратні проблеми, як і раніше, є головним вузьким місцем в інтерфейсах «мозок-комп’ютер» (ІМК). Неінвазивний підхід використовує електроенцефалографію (ЕЕГ), яка передбачає розміщення електродних шапочок на шкірі голови. Вона проста у застосуванні та діє як потужний фільтр. Безперечно, вона блокує більшу частину електричних перешкод, але також спотворює реальні мозкові сигнали, що ускладнює досягнення високої точності.
Для підвищення чіткості сигналу вчені переходять до інвазивних методів. Електроди розміщуються безпосередньо на сірій речовині, або щільно прилягають до поверхні мозку. Якість сигналу значно покращується, коли пристрій розміщується у місці виникнення активності. Однак, цей підхід має високу ціну. Потрібно хірургічне втручання. У довгостроковій перспективі навколо імплантату утворюється рубцева тканина як реакція мозку на вторгнення. Згодом рубцева тканина ізолює електроди та блокує сигнал.
Фізика процесу залишається незмінною незалежно від цього, чи є датчик на голові чи всередині кори мозку. Електроди виявляють невеликі різниці напруги між нейронами. Комп’ютери посилюють шум, фільтрують статичні перешкоди та намагаються розшифрувати патерни. Ранні аналогові машини використовували стілус для нанесення цих хвиль на папір. Сучасні системи використовують програмне забезпечення, яке перетворює спайки (нервові імпульси) у команди.
Сенсорне введення змінює сценарій. Тут ІМК діє як міст із цифрового світу назад у мозок. Камера робить знімок. Комп’ютер перетворює візуальну інформацію на певний патерн напруги. Ці патерни вирушають в імплантат у зоровій корі. Якщо кодування правильно виконано, нейрон активується. Суб’єкт бачить непросто дані; він бачить зображення.
Картування ділянок мозку за допомогою магнітно-резонансної томографії
Ви не можете носити із собою апарат МРТ. Це величезний, дорогий надпровідний магніт. Але він незамінний для планування. Дослідники використали функціональну МРТ для картування мозкової активності перед операцією.
Розглянемо пацієнта, який хоче керувати роботизованою рукою за допомогою думок. Перед свердлінням черепа його поміщають у сканер МРТ. Пацієнта просять уявити рух лівої руки. Сканер підсвічує певні області, які відповідають за цю активність. Нейрохірурги тепер достеменно знають, куди розмістити електроди для максимальної ефективності. Без цієї карти ви дієте наосліп.
Міф про статичний мозок
Упродовж десятиліть існувало переконання, що дорослий мозок завершено. Це фіксована структура. Коли зростання припиняється, нейронні шляхи стають твердими. Безперечно, ви можете освоїти нові навички, але саме «залізо» залишається незмінним.
Ця теорія померла у 1990-х роках.
Відкриття кортикальної пластичності змінило все. Воно показало, що дорослий мозок залишається гнучким. Він перебудовується у відповідь на новий досвід, навчання та травми. При вивченні мови або відновлення після інсульту інші частини мозку беруть він виконання пошкоджених функцій. Створюються нові зв’язки. Старі усуваються.
Ця гнучкість є секретним інгредієнтом застосування ІМК. Це означає, що дорослі пацієнти не борються з непробивною біологічною стіною. Їхній мозок може адаптуватися до інтерфейсу. З імплантатами мозок згодом перестає сприймати сторонній об’єкт як загарбника. Він інтегрує пристрій. Створюються нові нейронні шляхи навколо електродів і електроди починають сприйматися як частина власної нервової системи.
Хоча технології переходять від статусу дива до категорії необхідності, механізми інтерфейсу все ще перебувають у конфлікті з біологією.
Уявіть зручність звичайного пульта дистанційного керування. Тепер уявіть, що можна перемикати канали, не піднімаючи пальця. Керування відеогрою за допомогою думок звучить як фокус. Це демонстрація технології, яка на мить засліплює аудиторію, а потім іде в тінь. Але це легковажне застосування лише верхівка айсберга. Реальні ставки значно вищі.
Здатність керувати курсором комп’ютера за допомогою уявних команд – це не спеціальний трюк для людей з тяжкими травмами спинного мозку або синдромом «замкненої людини». Це рятівне коло. Це фундаментальна зміна у ступені незалежності.
Отже, як ми подолаємо розрив між крихітними електричними імпульсами в мозку та фізичними рухами роботизованої руки?
Тренуйте мозок, щоб керувати машинами
Ранні експерименти розпочиналися не з людьми. Дослідники використовували мавп, яким імплантували електроди. Спочатку мавпи використовували фізичний джойстик для керування роботизованою рукою. Дослідники моніторили нейронні сигнали, що генеруються в процесі. Вони шукали кореляції між певною активністю мозку та певними рухами.
Нарешті вони прибрали джойстик. Мавпа навчилася керувати роботизованою рукою, використовуючи лише сигнали від імпланту. Це є доказом концепції. Мозок може навчитися долати необхідність фізичного введення.
Застосування цього до людей, особливо тих, хто повністю втратив рухові функції, набагато складніше. Користувачі мають пройти навчання.
Розглянемо ЕЕГ-гарнітуру чи інвазивний імплантат. Суб’єкти уявляли, як вони закривають праву руку. Фізично нічого не відбувалося. Але програмне забезпечення дослухалося.
За сотні чи тисячі спроб машина навчилася розпізнавати специфічні нейронні коди, пов’язані з ідеєю «закрити руку». Програмне забезпечення, що постачається з роботизованим протезом, запрограмоване на розпізнавання цього патерну. Сигнал надсилається, коли у користувача виникає думка. Роботизована рука стискається.
Це петля зворотного зв’язку. Мозок навчається генерувати чіткіші сигнали. Програмне забезпечення вчиться інтерпретувати їх точніше.
Мислення в координатах
Така сама логіка застосовується до управління курсором. Замість фізичних жестів користувачі думають про напрямок руху: вперед, ліворуч, праворуч, назад.
За достатньої практики користувачі можуть навчитися точному управлінню. Ви можете намалювати коло на екрані. Ви можете запустити програму. Ви можете переміщатися по меню та керувати телевізором.
Теоретична кінцева мета? Друк.
Уявіть можливість друкувати електронного листа зі швидкістю думки, взагалі не використовуючи клавіатуру. Це не наукова фантастика. Це наступний логічний крок у розвитку мозково-комп’ютерних інтерфейсів.
За межами протезів: відновлення природного руху
Як тільки базові механізми перетворення ідей на дії будуть відточені, області застосування швидко розширяться. Це не обмежується зовнішніми роботизованими руками.
Користувачі з обмеженими можливостями можуть використовувати роботизовані ортези, які кріпляться до їх кінцівок. Ці екзоскелети забезпечують пряму взаємодію з довкіллям і відновлюють раніше втрачену рухливість.
Однак є пряміший шлях. Ця технологія не обов’язково вимагає “роботизованого компонента”.
Дослідники шукають способи повністю обійти пошкоджені ділянки спинного мозку. М’язи тіла активуються шляхом відправлення сигналів безпосередньо до нервів, що контролюють рухи рук. Коли користувач хоче ворухнутись, рука рухається. Зовнішні пристрої не потрібні. Зв’язок «розум-м’яз» просто відновлюється.
Погляд у майбутнє: зір і слух
Це лише моторна сторона рівняння. Інша сторона сенсорного досвіду пов’язана із вхідними даними.
Ми вже спостерігаємо прогрес у кохлеарних імплантатах, які відновлюють слух. Одночасний розвиток штучного зору виводить межі можливості людського ока.
Технології мозково-комп’ютерного інтерфейсу пройшли повне коло, ставши чимось більшим, ніж просто рухливість. Йдеться про сприйняття, відчування та взаємодію зі світом природним чином. Відстань між розумом та машиною скорочується.
Що станеться, якщо ця прірва зникне?
Хоча кохлеарні імплантати залишаються найбільш розвиненим і широко використовуваним інтерфейсом “мозок-комп’ютер”, вони далеко не єдине застосування цієї технології. Щоб зрозуміти весь потенціал технологій інтерфейсів «мозок-комп’ютер», нам потрібно вийти за межі слухових апаратів та звернутися до зорової кори.
Механізм починається з нормальної слухової системи. Звукові хвилі проходять через вухо, змушуючи вібрувати дрібні органи, і зрештою слуховий нерв перетворює ці вібрації на електричні сигнали. Коли фізична структура вуха пошкоджена, цей ланцюжок порушується. Ваші нерви можуть бути гаразд, але вони перебувають у «мовчанні». Коклеарні імплантати заповнюють цю прогалину. Вони обходять пошкоджене залізо і перетворюють звукові хвилі безпосередньо на електричні імпульси, які подаються прямо на слуховий нерв. Результат не є повністю точною копією оригіналу, але достатньо для розшифровки розмов.
Зір — це зовсім інша історія.
Обробка візуальних даних вимагає набагато складнішої нейронної архітектури, ніж обробка аудіоданих. Внаслідок цього візуальні протези менш зрілі, ніж слухові імплантати. Проте їхні принципи відбивають підхід кохлеарних імплантатів. Електроди імплантуються безпосередньо в зорову кору – область мозку, що відповідає за інтерпретацію сигналів від сітківки.
Зовнішнє обладнання нагадує окуляри із невеликою камерою. Ці камери передають відео на комп’ютер, який обробляє їх і відправляє на внутрішній імплантат. Користувачі повинні пройти суворе тренування, аналогічне реабілітації, необхідної для протезів, керованих силою думки, щоб навчитися інтерпретувати ці нові електронні патерни у вигляді зображень.
Зір 20/20? Ні. Однак це працююче рішення, яке значно покращилося з перших експериментів у 1970-х роках.
Візьмемо для прикладу Єнса Науманна. Коли він повністю осліп, він одержав імплантат другого покоління. Технологія повернула достатній обсяг сенсорної інформації, щоб він міг самостійно орієнтуватися у нью-йоркській системі метро. Він також може керувати автомобілем на парковці. Ця сцена видається вирваною з наукової фантастики, але вона ґрунтується на сучасних технологіях.
Пристрій Науманна має вражаючу схожість з VISOR, що використовується Джорді Ла Форжем у серіалі «Зоряний шлях: Наступне покоління». Зовнішній роз’єм, що з’єднує його окуляри з камерою та електроди в мозку, концептуально такий самий, як пристрій Ла Форджа. У чому різниця? Науман бачить видимий спектр. Він не здатний виявляти інфрачервоне світло та інші невидимі частини електромагнітного спектру, з якими справляється вигаданий VISOR.
Страх перед контролем розуму
Здатність впроваджувати сенсорну інформацію у мозок неминуче викликає похмурі питання. Якщо ми можемо надсилати сигнали, чи можемо ми також надсилати команди? Чи є контроль розуму реальною загрозою?
Коротка відповідь – ні.
Використання простих сенсорних сигналів технічно складно. В даний час неможливо відправляти складні мимовільні моторні команди, які б пригнічували вільну волю людини. Складність нервової системи, необхідна керувати певними діями, несумісна з поточними технологіями.
Існують також практичні перешкоди. Будь-хто, хто стане жертвою мимовільного контролю розуму, повинен бути викрадений і підданий великої інвазивної операції на мозку для імплантації електродів. Це не станеться потай. Ви можете побачити цей процес.
Таким чином, незважаючи на технологічний прогрес, антиутопічні сценарії дистанційного контролю розуму залишаються у сфері фантастики. На сьогоднішній день інтерфейс “мозок-комп’ютер” – це інструмент відновлення, а не примусу.
Сувора реальність інтерфейсів «мозок-комп’ютер»
Хоча ми вже розглянули основні концепції інтерфейсів «мозок-комп’ютер» (BCI), важливо чітко розуміти, що вони ще повністю функціональними. Тертя (складності) має конкретні причини.
Мозок – це складний клубок. Стверджувати, що думки це просто електричні сигнали, було б перебільшенням. Перед вами приблизно 100 мільярдів нейронів. Вони постійно відправляють та отримують сигнали через складну мережу. Цей процес насамперед обумовлений хімічними реакціями, які неможливо виявити за допомогою звичайних мозкових хвиль. Все, що вони бачать, це електрика.
Далі йде якість сигналу. Воно слабке. ЕЕГ вимірює невеликі електричні потенціали. Моргання ока суб’єкта може створити сильніший сигнал, ніж реальна активність мозку, яку ви намагаєтеся рахувати. Це схоже на спробу почути розмову посеред урагану. Поліпшення імплантатів та датчиків допоможуть, але поки що читання мозкових сигналів супроводжується шумом. Статична електрика всюди.
Портативність залишається проблемою. Ранні системи були підключені проводами до мейнфрейму розміром із кімнату. Хоча ми пройшли довгий шлях, деякі інтерфейси “мозок-комп’ютер” все ще потребують кабелів. Бездротові варіанти зазвичай вимагають, щоб користувача був окремий комп’ютер вагою близько 10 кілограмів. Це багато. Він стане легшим. Він стане бездротовішим. Але ми ще не досягли цієї мети.
Хто створює інтерфейси «мозок-комп’ютер»?
Область BCI швидко розвивається. Декілька компаній emerge як значні гравці у цій сфері. Хоча більшість інновацій все ще перебувають на стадії досліджень та розробок, комерційні програми починають формуватися.
Neuralink була заснована Ілоном Маском і, ймовірно, є найвідомішим ім’ям. Вони створюють пристрої, що імплантуються, які усувають розрив між мозком і зовнішнім обладнанням. Мета двояка. Одна з них – лікування неврологічних захворювань, а інша – забезпечення просунутої взаємодії людини та комп’ютера. Вони подолали кілька важливих перешкод. Згідно з поточними клінічними випробуваннями на людях, пацієнти з тяжкими формами інвалідності відновили рухи та здатність до спілкування. Це важливий крок від теорії до практики.
Synchron використовує інший шлях. Вони розробляють мінімально інвазивний інтерфейс “мозок-комп’ютер”. Пристрій можна імплантувати через кровоносну судину, а не просвердлюючи отвір у черепі. Цей підхід спрямований на допомогу пацієнтам із паралічем, які хочуть керувати цифровими пристроями за допомогою думок. Найменша інвазивність означає менший ризик. Це практична альтернатива традиційній відкритій нейрохірургії.
Таким чином, ми маємо неінвазивних гравців. CTRL-Labs, що тепер є частиною Meta, досліджує технології, що носяться. Вони зосереджені на перетворенні нервових сигналів у команди за допомогою зовнішніх пристроїв. Жодних імплантатів. Жодної хірургії не потрібно. Мета цього шляху – зробити інтерфейси “мозок-комп’ютер” доступними не тільки для медичних випадків, але і для повсякденного використання.
Це не просто наукові проекти. Це прототипи нових способів взаємодії із технологіями.
Чому це важливо зараз?
Інтерфейси «мозок-комп’ютер» перетворюють наукову фантастику на технічні завдання. Ми не просто мріємо про “що”, ми вирішуємо “як”.
Ця обіцянка включає не тільки дистанційне управління розумом. Йдеться відновлення суб’єктності (агентності). Для людей з важкими формами інвалідності ці інтерфейси можуть відновити контроль над рухами, звуком та цифровим середовищем. Це відчутне покращення якості життя.
Ми спостерігаємо ранні стадії цих змін, оскільки такі компанії, як Neuralink, Synchron та Meta, продовжують розширювати кордони. Це може перевизначити спосіб нашої взаємодії з машинами. Ми можемо відновити втрачені почуття. Ми також можемо почати думати про інтерфейси користувача, які в даний час вимагають використання рук і очей.
Дзвінки залишаються значними. Шум сигналів. Вага обладнання. Етичні питання, що стосуються конфіденційності та суб’єктності. Але фундамент було закладено сьогодні. Майбутнє, де BCI стануть частиною повсякденного життя, настане не наступного року. Але воно настане.
Часті питання
Як працює ЕЕГ BCI?
Виявляє зміни у функції мозку. Електроди на шкірі голови записують ці сигнали. Програмне забезпечення перетворює їх на команди. На основі цих ментальних входів можна переміщати курсор, друкувати слова або керувати роботизованими руками.
Що таке система Brain Computer Interface?
Це поєднання апаратного забезпечення (датчики, імплантати) та програмного забезпечення (обробка сигналів, відображення команд), що забезпечує передачу даних між мозком та комп’ютером.
Як реалізується BCI?
Існують різноманітні методи. Електроди можна розміщувати на шкірі голови (неінвазивно), на поверхні мозку (частково інвазивно) або всередині мозкової тканини (інвазивно). Дані надходять від електродів процесор, який інтерпретує мету.
Які існують три типи інтерфейсів «мозок-комп’ютер»?
1. Інвазивний інтерфейс “мозок-комп’ютер”
2. Частково інвазивний інтерфейс “мозок-комп’ютер”
3. Неінвазивний інтерфейс “мозок-комп’ютер”
Різниця полягає в розташуванні електродів щодо черепа та мозкової тканини. Інвазивний дає чіткий сигнал, але несе найбільший ризик. Неінвазивний безпечний, але зашумлений. Частково інвазивний знаходиться десь посередині.
Куди далі
Якщо ви хочете більше дізнатися, знайдіть проект Brain Computer Interface, щоб ознайомитися з нашим планом досліджень. Видання Wired та Engadget надають широке покриття апаратного забезпечення. Для вивчення біології ознайомтеся з ресурсами про мозок і про те, як працює слух, щоб зрозуміти сенсорне введення, яке ми намагаємося обійти.
Джерела варіюються від звітів про системи читання думок NASA на початку 2000-х до останніх звітів про клінічні випробування Neuralink на людях. Ця область дуже молода. Дані постійно змінюються. Слідкуйте за оновленнями.
