A Powerful New Neurotech Tool for Augmenting Your Mind | Conor Russomanno | TED

Переводчик: Zlata B. Редактор: Olga Mansurova

I became obsessed with the relationship between the brain and the mind

У меня возникла навязчивая мысль о связи между мозгом и сознанием

после того, как я получил несколько сотрясений мозга,

after suffering a series of concussions

playing football and rugby in college.

играя в футбол и регби в колледже.

I felt my mind change for years after.

В течение нескольких последующих лет я ощущал изменения своего сознания.

I was studying computers at the time,

Я тогда занимался изучением компьютеров,

and it felt as though I had damaged my hardware

и казалось, будто я повредил свои системные комплектующие

and that my software was running differently.

и будто моё программное обеспечение работало теперь как-то иначе.

Over the following years,

В последующие годы произошла череда неприятных событий.

a close friend suffered a serious neck injury

Мой близкий друг серьёзно повредил шею.

and multiple friends and family members were struggling

Несколько друзей и членов семьи пытались бороться

with crippling mental health issues.

с тяжёлыми душевными расстройствами.

All around me, people that I loved dearly were being afflicted by ailments

Вокруг меня те, кого я так сильно любил, страдали

of the nervous system or the mind.

от расстройств нервной системы или разума.

Я начал бороться со всем этим,

I was grappling with all of this

while pursuing an MFA in Design and Technology at Parsons

когда получал степень магистра дизайна и технологий в школе Parsons.

when a friend and fellow student showed me an open-source tutorial

Мой друг и однокурсник показал мне открытый видео-урок о том,

on how to build a low-cost single-channel EEG system

как собрать недорогую одноканальную систему ЭЭГ

to detect brain activity.

для определения активности мозга.

After a couple long nights of hacking and tinkering,

После пары долгих ночей головоломок и возни с оборудованием

I saw my brainwaves dancing across the screen for the very first time.

я впервые увидел, как волны моего мозга танцуют на экране.

And that moment changed my life.

И этот момент изменил мою жизнь.

In that moment,

Именно тогда

I felt as though I had the possibility to help myself and the people I loved.

я почувствовал, что смогу помочь себе и тем, кого я люблю.

And I also realized that I couldn't do it alone.

Но я также понял, что не смогу справиться в одиночку.

I needed help.

Мне требовалась помощь.

И в 2013 году в Бруклине с несколькими друзьями-единомышленниками

So in 2013, in Brooklyn, with some like-minded friends,

I started OpenBCI, an open-source neurotechnology company.

я основал OpenBCI, нейротехнологическую компанию

по разработке ПО с открытым исходным кодом.

In the beginning,

Изначально

нашей целью было создать телескоп, который можно развернуть внутрь,

our goal was to build an inward-pointing telescope

and to share the blueprints with the world

и поделиться этим проектом с миром,

so that anybody with a computer could begin peering into their own brain.

чтобы любой, у кого есть компьютер, мог заглянуть в собственный мозг.

At first, we were an EEG-only company.

Сначала наша компания занималась только ЭЭГ.

We sold brain sensors to measure brain activity.

Мы продавали датчики мозга для измерения его активности.

I thought that's what people wanted.

Я думал, что это то, чего люди хотели.

But over time, we discovered people doing very strange things with our technology.

Но спустя некоторое время мы узнали, что люди

использовали наши технологии довольно странным образом.

Некоторые прикрепляли датчик к животу,

Some people were connecting the equipment to the stomach

to measure the neurons in the gut

чтобы измерять нейроны в кишечнике

and study gut-brain connection and the microbiome.

и изучать взаимосвязь кишечника с мозгом и микробиом.

Others were using the tools to build new muscle sensors and controllers

Другие использовали инструменты для создания новых мышечных сенсоров

for prosthetics and robotics.

для протезирования и робототехники.

And some were designing new devices

А некоторые создавали новые устройства

and peripheral add-ons that could be connected to the platform

и периферийные расширения, которые могли подключаться к платформе,

to measure new types of data that I had never heard of before.

чтобы измерять новые типы данных, о которых я прежде не слышал.

What we learned from all of this

Из всего этого мы сделали вывод,

что сам по себе мозг довольно скучный.

is that the brain by itself is actually quite boring.

Turns out brain data alone lacks context.

Выходит, что информации в мозге не хватает контекста.

And what we ultimately care about is not the brain,

И в конце концов нас интересует не мозг,

but the mind, consciousness, human cognition.

а разум, сознание и когнитивные способности человека.

Когда есть приборы, как датчики ЭМГ для измерения мышечной активности

When we have things like EMG sensors to measure muscle activity

or ECG sensors to measure heart activity,

или датчики ЭКГ для измерения активности сердца,

eye trackers

глазные трекеры

and even environmental sensors to measure the world around us,

и даже датчики окружающей среды для оценки мира вокруг нас,

all of this makes the brain data much more useful.

всё это делает данные мозга намного более полезными.

But the organs around our body, our sensory receptors,

Однако из органов нашего тела, наших сенсорных рецепторов,

are actually much easier to collect data from than the brain,

на самом деле гораздо легче собирать данные чем из мозга,

and also arguably much more important for determining the things

а также они, вероятно, играют более важную роль в определении тех вещей,

that we actually care about: emotions, intentions and the mind overall.

которые действительно нас волнуют: эмоции, намерения и сознание в целом.

Additionally,

К тому же

we realized that people weren't just interested

мы осознали, что люди заинтересованы не только

in reading from the brain and the body.

в считывании информации из мозга и тела.

They were also interested in modulating the mind

Они также были заинтересованы в модулировании сознания

through various types of sensory stimulation.

с помощью различных видов сенсорной стимуляции,

Things like light, sound,

например, таких как свет, звук,

haptics and electricity.

тактильное воздействие или электричество.

It's one thing to record the mind,

Одно дело — записывать деятельность сознания,

другое — его модулировать.

it's another to modulate it.

Идея комплексной системы,

The idea of a combined system

которая может как считывать информацию из мозга или тела,

that can both read from and write to the brain or body

так и отправлять сигналы обратно в мозг или тело,

is referred to as a closed-loop system or bidirectional human interface.

относится к идее замкнутой системы

или двунаправленному человеко-машинному интерфейсу.

This concept is truly profound,

Концепция действительно глубокая,

and it will define the next major revolution in computing technology.

и она станет решающей в следующей крупной революции

в мире компьютерных технологий.

When you have products that not just are designed for the average user

Когда у вас есть продукты, разработанные не просто для усреднённого пользователя,

but are designed to actually adapt to their user,

но разработанные для реальной адаптации под своего пользователя,

that's something truly special.

это поистине нечто особенное.

When we know what the data of an emotion or a feeling looks like

Когда мы знаем, как выглядят данные наших эмоций или чувств,

and we know how to make that data go up or down,

и знаем, как сделать, чтобы эти данные изменились,

then using AI,

тогда с помощью ИИ

we can build constructive or destructive interference patterns

мы можем строить конструктивные или деструктивные модели интерференции,

to either amplify or suppress those emotions or feelings.

чтобы усиливать или подавлять эти эмоции или чувства.

In the very near future,

В ближайшем будущем

we will have computers that we are resonantly

у нас появятся компьютеры, с которыми мы будем резонансно

and subconsciously connected to,

и подсознательно связаны,

enabling empathetic computing for the very first time.

что позволит использовать эмпатическую обработку данных.

In 2018,

В 2018 году

we put these learnings to work

мы применили полученные знания на практике

and began development of a new tool for cognitive exploration.

и начали разработку нового инструмента для когнитивных исследований,

Named after my friend Gael, who passed from ALS in 2016,

названного в честь моего друга Гаэля, который умер от БАС в 2016 году.

we call it Galea.

Мы называем его Галея.

It’s a multimodal bio-sensing headset,

Это мультимодальная биосенсорная гарнитура,

and it is absolutely packed with sensors.

и она просто забита датчиками.

It can measure the user’s heart, skin, muscles, eyes and brain,

Она может измерять сердечную активность пользователя,

состояние кожи, мышц, глаз и мозга,

and it combines that capability with head-mounted displays

и сочетает эти возможности с навесными дисплеями

or augmented and virtual reality headsets.

или гарнитурами дополненной и виртуальной реальности.

К тому же мы исследуем возможность интеграции

Additionally, we're exploring the integration

of non-invasive electrical neural stimulation as a feature.

неинвазивной электрической нейростимуляции в качестве отдельной функции.

The Galea software suite

Пакет программного обеспечения «Галея»

can turn the raw sensor data into meaningful metrics.

может превратить необработанные данные датчиков в значимые показатели.

С помощью некоторых датчиков

With some of the sensors,

we're able to provide new forms of real-time interactivity and control.

мы можем обеспечить новые формы взаимодействия

и управления в реальном времени.

And with all of the sensors,

И благодаря всем этим датчикам

we're able to make quantifiable inferences about high-level states of mind,

мы можем делать количественные выводы о высокоуровневых состояниях сознания,

things like stress, fatigue, cognitive workload and focus.

таких как стресс, усталость, умственная деятельность и концентрация внимания.

In 2019,

В 2019 году легендарный нейрохакер по имени Кристиан Байерлейн

a legendary neurohacker by the name of Christian Bayerlein

reached out to me.

связался со мной.

He was actually one of our very first Kickstarter backers

Он был одним из первых наших друзей

раньше, когда мы только начинали.

when we got started, early on.

Christian was a very smart, intelligent, happy-go-lucky

Кристиан был очень умным, смышлёным, беспечным

and easygoing guy.

и открытым парнем.

And so I worked up the courage to ask him, "Hey, Christian,

Поэтому я набрался смелости и спросил его: «Эй, Кристиан,

can we connect you to our sensors?"

можно, мы подключим тебя к нашим датчикам?»

На что он тогда ответил:

At which point he said,

«Я думал, ты уж никогда не спросишь».

"I thought you would never ask."

(Laughter)

(Смех)

So after 20 minutes,

И через 20 минут

we had him rigged up to a bunch of electrodes,

он уже был подключён ко всевозможным электродам.

and we provided him with four new inputs to a computer.

Мы также предоставили ему четыре новых входа в компьютер.

Маленькие цифровые кнопки, которыми он сам мог управлять.

Little digital buttons, that he could control voluntarily.

This essentially doubled his number of inputs to a computer.

Это, по сути, удвоило количество его входов в компьютер.

Позже, после многих заминок, вызванных COVID-19,

Years later, after many setbacks due to COVID,

мы полетели в Германию, чтобы лично работать с Кристианом

we flew to Germany to work with Christian in person

и воспользоваться нашим первым прототипом,

to implement the first prototype

который мы собираемся сегодня продемонстрировать здесь.

of what we're going to be demoing here today.

Christian then spent months training with that prototype

После этого Кристиан провёл несколько месяцев, тестируя прототип,

and sending his data across the Atlantic to us in Brooklyn from Germany

отправляя свои данные из Германии через Атлантику к нам в Бруклин

and flying a virtual drone in our offices.

и летая на виртуальном дроне по нашим офисам.

The first thing that we did was scour Christian's body

Первое, что мы сделали, мы обследовали тело Кристиана

for residual motor function.

на наличие остаточной двигательной функции.

We then connected electrodes to the four muscles

Затем мы подключили электроды к четырём мышцам,

that he had the most voluntary control over,

которые он мог лучше всего контролировать самостоятельно,

and then we turned those muscles into digital buttons.

а потом мы превратили эти мышцы в цифровые кнопки.

Мы применили интеллектуальную фильтрацию и обработку сигнала,

We then applied some smart filtering and signal processing

to adapt those buttons into something more like a slider

чтобы превратить эти кнопки в нечто более похожее на слайдер

or a digital potentiometer.

или цифровой потенциометр.

After that,

После этого мы соединили

we turned those four sliders

эти четыре слайдера

and mapped them to a new virtual joystick.

и оснастили их виртуальным джойстиком.

Christian then combined that new joystick

Затем Кристиан соединил новый джойстик

with the joystick that he uses with his lip to control his wheelchair,

с джойстиком, которым он управляет губами

для передвижения на инвалидной коляске.

and with the two joysticks combined,

Объединив эти два джойстика,

Christian finally had control over all the manual controls of a drone.

Кристиан наконец мог контролировать все ручные элементы управления дроном.

I’m going to stop talking about it, and we’re going to show you.

Я прерываю свой рассказ, и сейчас мы вам всё покажем.

Christian,

Кристиан,

welcome.

добро пожаловать.

(Applause)

(Аплодисменты)

At this point,

А сейчас

I'm going to ask everybody to turn off your Bluetooth

я попрошу каждого выключить Bluetooth

and put your phones in airplane mode

и перевести свой телефон в авиа-режим,

просто чтобы вам в лицо не прилетел дрон.

so that you don't get hit in the face with a drone.

(Laughter)

(Смех)

Кристиан, как ты себя чувствуешь?

How are you feeling, Christian?

Кристиан Байерлейн: Да, давай сделаем это.

Christian Bayerlein: Yeah, let's do it.

Conor Russomanno: Awesome.

Конор Руссоманно: Отлично.

This is a heads-up display that's showing all of Christian's biometric data,

Это дисплей, на котором отображаются все биометрические данные Кристиана,

as well as some information about the drone.

а также некоторая информация о дроне.

On the left here, we can see Christian's muscle data.

Вот здесь слева мы можем увидеть данные о мышцах Кристиана.

Christian is now going to attempt to fly the drone.

Кристиан сейчас попробует управлять дроном.

How are you feeling, Christian, feeling good?

Как тебе, Кристиан, всё нормально?

CB: Yes.

КБ: Да.

CR: All right. Rock and roll.

КР: Хорошо. Погнали.

Let's take this up for a joyride.

Давай-ка полетаем.

Whenever you're ready.

Как только ты будешь готов.

CB: I'm ready.

КБ: Я готов.

(Applause and cheers)

(Аплодисменты и возгласы)

CR: All right, take her up.

КР: Хорошо. Поднимай его.

And now let's do something we probably shouldn't do

Давай сделаем то, что нам, возможно, делать не стоит:

and fly it over the audience.

полетаем над зрителями.

(Laughter)

(Смех)

(Cheers and applause)

(Возгласы и аплодисменты)

Alright, actually, let’s do this.

Отлично, давай, правда, сделаем это.

I'm going to ask for people to call out some commands in the audience.

Сейчас я попрошу людей в зале выкрикивать какие-либо команды.

So how about you?

Ну, как насчёт вас?

Straight forward.

Прямо.

Straight forward.

Прямо.

(Laughter)

(Смех)

Alright. How about you?

Всё хорошо. А у вас как?

Man: Up!

Кто-то: Вверх!

(Laughter)

(Смех)

CR: Not down.

КР: Не вниз.

Oh, he's doing what he wants right now.

А, он сейчас делает, что ему вздумается.

Amazing.

Прекрасно.

(Cheers and applause)

(Возгласы и аплодисменты)

Alright, let’s bring it back.

Ладно, вернём его обратно.

And what I'm going to do right now is take control of the controller

А сейчас я возьму контроль над этим пультом,

so that you guys know

чтобы вы были уверены,

that there isn't someone backstage flying this drone.

что дрон не управляется кем-то из-за кулис.

All right, Christian, you're alright with that?

Хорошо, Кристиан, тебе с этим комфортно?

CB: Yeah.

КБ: Да.

CR: Unplug.

КР: Отключись.

Forward.

Вперёд.

And we're going to land this guy now.

И сейчас мы приземлим этого парня.

CB: I think I was better than you.

КБ: Думаю, у меня получалось лучше.

(Laughter)

(Смех)

(Applause)

(Аплодисменты)

CR: Amazing.

КР: Великолепно.

(Applause)

(Аплодисменты)

Now I'm going to unplug it so it doesn't turn on on its own.

Сейчас я отсоединю это, чтобы оно не включилось само.

Perfect.

Идеально.

Christian has repurposed dormant muscles from around his body

Кристиан задействовал спящие мышцы всего его тела

for extended and augmented interactivity.

для расширенной и дополненной интерактивности.

We have turned those muscles into a generic controller

Мы превратили эти мышцы в общий контроллер,

that in this case we've mapped into a drone,

который в данном случае мы направили на дрон,

but what's really cool is that joystick can be applied to anything.

но действительно здорово, что джойстик можно применить к чему угодно.

Another thing that's really cool

Есть ещё один крайне занимательный момент.

is that even in individuals who are not living with motor disabilities,

Даже у людей без нарушения двигательных функций

there exist dozens of dormant muscles around the body

существуют десятки спящих мышц по всему телу,

that we can tap into for augmented and expanded control interactivity.

которые мы можем задействовать для дополненной

и расширенной интерактивности управления.

And lastly,

И наконец,

all the code related to that virtual joystick,

весь код, связанный с этим виртуальным джойстиком,

we're going to open source

будет открытым.

so that you can implement it and improve upon it.

Это значит, что вы сможете использовать и улучшать его.

There's three things that have stood out to me

Три момента, которые показались мне важными

from working on this project and many others over the years.

за годы работы над этим проектом и многими другими.

One,

Во-первых,

we cannot conflate the brain with the mind.

мы не можем отождествлять мозг и сознание.

In order to understand emotions

Чтобы понять эмоции,

and tensions and the mind overall,

внутреннее напряжение и сознание в целом,

we have to measure data from all over the body,

необходим сбор информации со всех участков тела,

not just the brain.

а не только информация о мозговой активности.

Two,

Во-вторых,

open-source technology access and literacy

доступ к технологиям с открытым исходным кодом и грамотность

is one way that we can combat the potential ethical challenges we face

дают нам возможность борьбы с потенциальными этическими проблемами,

возникающими перед нами при внедрении нейронных технологий в общество.

in introducing neural technology to society.

But that's not enough.

Но этого недостаточно.

We have to do much, much more than that.

Мы должны прилагать намного больше усилий.

It's very important, imperative, that we set up guardrails

Очень важно, крайне необходимо, установить некие рамки

and design the future that we want to live in.

и спроектировать будущее, в котором мы сами хотим жить.

Three.

В-третьих,

It's the courage and resilience of trailblazers like Christian

это отвага и стойкость таких первопроходцев, как Кристиан,

who don't get bogged down by what they can't do,

которые не застревают в том, что у них не получается,

but instead strive to prove that the impossible is in fact possible.

а наоборот, стремятся доказать, что на самом деле невозможное возможно.

(Applause)

(Аплодисменты)

And since none of this would have been possible without you, Christian,

И поскольку все это было бы невозможно без тебя, Кристиан,

the stage is yours.

эта сцена твоя.

CB: Yeah, hi, everybody.

КБ: Да, всем привет.

Audience: Hi.

Зрители: Привет.

CB: I'm excited to be here today.

КБ: Я очень рад находиться сегодня здесь.

I was born with a genetic condition that affects my mobility

Я родился с генетическим заболеванием, которое мешает моей мобильности,

and requires me to have assistance.

из-за чего мне требуется помощь.

Despite my disability,

Несмотря на мою инвалидность,

I'm a very happy and fulfilled person.

я очень счастливый и полноценный человек.

What truly holds me back are not my physical limitations.

Мои физические ограничения в сущности не ограничивают меня.

Скорее являются препятствием преграды вокруг меня, в среде.

It's rather the barriers in the environment.

I'm a tech nerd and political activist.

Я технологический фанат и политический активист.

I believe that technology can empower disabled people.

Я верю, что технологии могут улучшить жизнь людей с ограниченными возможностями.

It can help create a better,

Они могут помочь создать лучший,

more inclusive and accessible world

более инклюзивный и доступный мир

for everyone.

для каждого.

This demonstration is a perfect example.

Эта демонстрация служит идеальным примером.

We saw what's possible when cutting edge technology

Мы увидели, что становится возможно, когда передовые технологии

is combined with human curiosity and creativity.

объединяются с человеческой любознательностью и креативностью.

So let's build tools that empower people,

Так давайте же создавать инструменты, расширяющие человеческие возможности,

applications that break down barriers

приложения, помогающие преодолеть барьеры,

and systems that unlock a world of possibilities.

и системы, открывающие мир.

I think that's an idea worth spreading.

Думаю, что эта идея достойна распространения.

Thank you.

Спасибо.

(Cheers and applause)

(Возгласы и аплодисменты)