The Mind-Reading Potential of AI | Chin-Teng Lin | TED

Fordító: Peter Pallos Lektor: Reka Lorinczy

How often are you frustrated by the time it takes

Milyen gyakran bosszankodtak az idő miatt, amely ahhoz kellett,

to accurately get things in your mind into a computer?

hogy a fejünkben lévő dolgokat pontosan vigyék számítógépre?

It is even worse for people like me,

Még rosszabb az olyanoknak, mint én,

whose first language is not based on letters.

akiknek első nyelve nem betűkön alapul.

I live and work in Australia,

Ausztráliában élek és dolgozom,

but I am originally from Taiwan.

de Tajvanról származom.

I moved to Sydney eight years ago

Nyolc éve költöztem Sydney-be,

and now run a university research center there.

és ott egyetemi kutatóközpontot vezetek.

Most of us use keyboards every day

Legtöbbünk naponta billentyűzetet használ,

to get things in our minds into the computer.

hogy a fejünkben lévő dolgokat a számítógépbe juttassuk.

We have to learn to type.

Meg kell tanulnunk gépelni.

The fact that you have to learn to do some things

Az, hogy meg kell tanulnunk néhány dolgot,

shows how unnatural it is.

azt mutatja, ez mennyire természetellenes.

The finger-driven touch screen has been around for 60 years.

Az ujjunkkal vezérelhető érintőképernyő 60 éve létezik.

It's convenient, but it is also slow.

Kényelmes, de lassú.

There are other ways to control computers --

Számítógépek másként is vezérelhetők:

joystick or gestures --

botkormánnyal vagy gesztusokkal,

but they are not very useful in capturing the words in your mind.

de ezek nem túl hasznosak az elménkben lévő szavak rögzítéséhez.

And it is words --

A szavak nélkülözhetetlenek

they are critical to communication for human beings.

az emberi kommunikáció szempontjából.

The problem is about to be over,

De a gondot az MI hamarosan megoldja.

because of AI.

Today, I will show you

Ma megmutatom,

how AI can turn the speech in your mind into words on screen.

hogyan tudja az MI szavakká alakítani képernyőn az elménkben lévő beszédet.

Getting from the brain to the computer efficiently

Az agyból a számítógépbe való hatékony betáplálás

is a real bottleneck for any computer application.

a számítógépes alkalmazások szűk keresztmetszete.

It has been my passion for 25 years.

25 éve ez a szenvedélyem.

Many of you, or most of you,

Sokan önök közül vagy legtöbben hallottak

have heard of "brain-computer interface," BCI.

az agy-számítógép csatolásról, azaz a BCI-ről.

I have been working on BCI,

2004 óta dolgozom a BCI-n,

for the direct communication between the brain and machine,

az agy és a gép közötti közvetlen kommunikáción.

since 2004.

I developed a series of EEG headsets that do this.

Ehhez számos EEG-fejhallgatót fejlesztettem ki.

But they are not new.

De nem ez az újdonság,

What is new is an interface that works in a natural way,

hanem a természetes módon működő felület,

based on how our brain is working naturally.

mint ahogy agyunk természetes módon működik.

Imagine reading words when someone is thinking,

Képzeljék el, hogy szavakat olvasnak, amikor valaki gondolkodik,

translating the brain signals into words.

az agyi jeleket szavakká fordítja le.

Today, you will see this in action,

Ma ezt implantátumok nélküli működés közben fogjuk látni.

and with no implants.

We are using AI

A mesterséges intelligenciát használjuk

to decode the brain signals on the top of your head

a fejünk tetején lévő agyi jelek dekódolására

and identify the biomarkers of speaking.

és a beszéd biomarkereinek azonosítására.

That means that you can send the words in your mind into the computer

Ez azt jelenti, hogy az elménkben lévő szavakat

with wearable technology.

hordozható technológiával számítógépbe küldhetjük.

It's exciting,

Ez roppant izgalmas,

and I believe it will open up the bottleneck

és megnyitja a szűk keresztmetszetet

of how we engage with computers.

a számítógépekkel való kapcsolattartásban.

We are making exciting progress in decoding EEG to test this.

Izgalmas előrelépést érünk el az EEG dekódolásában.

It's natural.

Ez természetes.

We have had very promising results

Ígéretes eredményeket értünk el

in decoding EEG when someone is speaking aloud.

az EEG dekódolásában, amikor valaki fennhangon beszél.

The frontier we are working on now

Most olyan EEG-k dekódolásán dolgozunk,

is to decode EEG when the speech is not spoken aloud,

amikor nem fennhangon beszélünk,

the words that flow in your mind when you are listening to others

amikor csak elménkben áramlanak a szavak, miközben másokat hallgatunk,

or when you are talking to yourself or thinking.

vagy amikor magunkban beszélünk, vagy éppen gondolkodunk.

We are well on the way to make it a reality.

Már jó úton vagyunk, hogy ezt megvalósítsuk.

Who would like to see this in action?

Ki szeretné látni működés közben?

(Cheers and applause)

(Ujjongás és taps)

Great, we are ready to demonstrate it to you.

Nagyszerű, készen állunk a bemutatásra.

I am going to invite two of my team, Charles and Daniel,

Kérem Charlest és Danielt a csapatomból,

to show it to us again.

hogy mutassák be ezt nekünk.

This is the first world premiere for us,

Ez az első világpremier,

so I hope you can be patient with us.

így remélem, türelmesek lesznek hozzánk.

We are getting around 50 percent accuracy ...

Kb. 50%-os pontosságot érünk el

(Laughter)

(Nevetés)

in decoding the brain signals into words

az agyi jelek szavakká dekódolása során,

when someone is speaking silently.

amikor valaki csendben beszél.

Here shows how it will work.

Megmutatjuk, hogyan működik.

We have a collection of words that we have trained our technology with.

Van szógyűjteményünk, amellyel kifejlesztettük technológiánkat.

They are combined into sentences.

Mondatokba vannak összerakva.

Charles will select one sentence,

Charles kiválaszt egy mondatot,

and Daniel will read the sentence word by word, silently,

Daniel pedig szóról szóra csendben felolvassa a mondatot,

and produce the brain signals that will be picked up by our sensors.

eközben agyi jeleket képez, amelyeket érzékelőink felvesznek.

Our technology will decode the brain signals into words.

Technológiánk az agyi jeleket szavakká dekódolja.

Charles, Daniel, are you ready to go ahead?

Charles, Daniel, készen álltok a továbblépésre?

This is the sentence

Ezt a mondatot

that Daniel is going to read silently.

Daniel csendben fogja felolvasni.

(Applause)

(Taps)

Sorry, please keep silent. (Laughter)

Elnézést, kérem, maradjanak csendben.

(Nevetés)

Here are the --

Itt vannak

decoded words.

a dekódolt szavak.

They are likely the intended words.

Valószínűleg ezek a tudatosított szavak.

You can see the probability ranking

Technológiánkkal megtekinthetik

of the decoded words by our technology.

a dekódolt szavak valószínűségi rangsorát.

The pattern shows our predicted sentence ...

A minta megmutatja a megjósolt mondatunkat.

is not so correct.

De nem teljesen helyesen.

(Laughter)

(Nevetés)

Sorry, you see the other 50 percent,

Sajnálom, a másik 50%-ot láttuk,

a rendszer nem működik.

the system doesn't work.

But actually, you still can see some keywords where we got it.

De azért látunk pár megszerzett kulcsszót.

Let's invite Charles and Daniel to do it again,

Kérjük meg Charlest és Danielt, hogy ismételjék meg,

but please keep silent when he's reading silently.

de kérem, maradjanak teljes csöndben, miközben olvas.

Here is the sentence,

Itt van a mondat,

another sentence that Daniel will read word by word, silently.

egy másik mondat, amelyet Daniel csendben szóról szóra felolvas.

(Laughs)

(Nevet)

Again, here are the decoded words.

Itt vannak a dekódolt szavak.

They are likely the intended words.

Valószínűleg ezek a tudatosított szavak.

The pattern shows our predictive sentence

A minta azt mutatja, hogy prediktív mondatunk

is very close to the ground-truth sentence this time.

ezúttal nagyon közel áll az igazi mondathoz.

(Cheers and applause)

(Ujjongás és taps)

Thank you, thank you.

Köszönöm, köszönöm.

How does it work?

Hogyan működik?

We pick up the brain signals with sensors

Az agyi jeleket érzékelőkkel felvesszük,

and amplify and filter them

felerősítjük és szűrjük őket,

to reduce the noise and get the right biomarkers.

hogy a zajt csökkentsük, és megkapjuk a helyes biomarkereket.

We use AI for the task.

A feladathoz az MI-t használjuk.

We use deep learning to decode the brain signals

A mély tanulást használjuk

into the intended words.

az agyi jelek szándékolt szavakra fordítására.

And then we use the large language model

Ezután a nagy nyelvi modellt használjuk

to make the match of the decoded words

a dekódolt szavak egyeztetésére

and make up for the mistakes in EEG decoding.

és az EEG-dekódolás hibáinak kijavítására.

All of this is going on in the AI,

Mindez az MI-ben zajlik, de a felhasználó számára a művelet

but for the user, the interaction is natural,

természetes, gondolatokon át

through thoughts and natural language.

és természetes nyelven folyik.

We are very excited about the advances that we are making

Lelkesít a szavak

és mondatok megértésében elért előrelépés.

in understanding words and sentences.

Another thing that is very natural to people

Nagyon természetes az embereknek,

is looking at something that has their attention.

hogy megvizsgálják, ami felkelti az érdeklődésüket.

Imagine if you could select an item just by looking at it,

Képzeljék el, ha valamit csak ránézésre választhatnának ki,

not by picking it off the shelf

nem pedig úgy, hogy leveszik a polcról,

or punching a code into the vending machine.

vagy az áruautomatába beütik a kódot.

Two years ago,

Két éve

in a project about hands-free control of robots,

a robotok távvezérléséről szóló projektben

we were very excited about robot control

izgatottak voltunk

az ujjak vizuális felismerése miatt.

via visual identification of the fingers.

We are now beyond that.

Most már túl vagyunk ezen.

We need not any fingers.

Nincs szükségünk ujjra.

The AI is making it natural.

Az MI természetessé teszi.

There are four objects on the table.

Négy tárgy van az asztalon.

Toy car,

Játékautó,

toy animal,

játékállat,

plastic flower and some food,

műanyag virág és néhány élelmiszer,

which is also plastic,

amelyek szintén műanyagból vannak,

not left over from the breakfast this morning.

nem a mai reggeli maradékai.

You can also see the four objects' photo on the screen.

A négy objektum fényképe is látható a képernyőn.

Daniel is going to look at the photos,

Daniel megnézi a képeket,

and select an item in his mind.

és gondolatban kiválaszt egy tárgyat.

If it is working as it should,

Ha úgy működik, ahogy kellene,

you will see the selected item pop up on screen.

akkor a kiválasztott tárgy a képernyőn megjelenik.

We use photos for this because they are very controllable.

Ehhez fényképeket használunk, mert jobban ellenőrizhetők.

To show that this is not all just built into my presentation,

Hogy megmutassam, hogy ez nem csak az előadásomba épül be,

Charles will pick up one item for Daniel to select in mind.

Charles felvesz egy tárgyat, hogy Daniel gondolatban kiválassza.

Please, Charles.

Kérlek, Charles.

It's a car.

Az autót.

So, Daniel, select ...

Daniel, válassz!

the car in his mind.

Az autó jár a fejében.

(Laughter)

(Nevetés)

Hamburger.

Hamburger.

(Laughter)

(Nevetés)

It's incorrect.

Ez helytelen.

(Laughter)

(Nevetés)

It's unlucky that the 30-percent error rate came with us again.

Sajnos ismét a 30%-os hibaarány jött elő.

Let's invite Charles and Daniel to show it again.

Kérjük meg Charlest és Danielt, hogy mutassák meg újra.

It's a duck, a lovely duck.

Szép kacsa.

(Laughter)

(Nevetés)

OK. Good.

Rendben. Jó.

(Cheers and applause)

(Ujjongás és taps)

Thank you. Thank you.

Köszönöm. Köszönöm.

Daniel did this for his PhD.

Ez Daniel PhD-dolgozatának témája.

It's very impressive, isn't it?

Lenyűgöző, nem igaz?

When Daniel selects an item in his mind,

Amikor Daniel gondolatban egy tárgyat kiválaszt,

his brain recognizes and identifies the object and triggers his EEGs.

agya felismeri és azonosítja, és elindítja az EEG-jeleit.

Our technology decodes the triggers.

Technológiánk dekódolja a kiváltó jeleket.

We are working on our way through the technical challenges.

Dolgozunk a műszaki akadályok elhárításán.

We will work on overcoming the interference issue.

Dolgozunk az interferencia leküzdésén.

That's why I asked for the phones to be turned off.

Ezért kértem, kapcsolják ki telefonjukat!

Different people have different neural signatures,

Mindenkinek más az idegi mintázata,

which are important to decoding accuracy.

ezek fontosak a dekódolási pontosság szempontjából.

One reason I brought Daniel along here

Danielt azért hoztam ide,

is because he can give off great neural signatures.

mert nagyszerű az idegi mintázata.

(Laughter)

(Nevetés)

(Applause)

(Taps)

Yeah, he can give us a great neural signature,

Igen, technológiánk szempontjából

as far as our technology is concerned.

nagyszerű az idegi mintázata.

They are still cables here as well.

Még mindig itt vannak a kábelek.

It is not yet very portable.

Még nem túl hordozható.

Probably one biggest barrier to people using this

Valószínűleg az egyik legnagyobb akadály a használóknak ez lesz:

will be: “How do I turn it off?”

„Hogyan kapcsolhatom ki?”

Any one of you will have had times when you are happy

Mindenkivel előfordult már, amikor örült,

that the people you are with don't know what you are really thinking.

hogy akikkel együtt volt, nem tudták, mi jár a fejében.

(Laughter)

(Nevetés)

There are serious privacy and ethical issues

Vannak komoly magánéleti és erkölcsi kérdések,

that will have to be dealt with.

amelyekkel foglalkozni kell.

I am very passionate about how important this technology can be.

Szenvedélyem a technológia fontossága.

One exciting point is linking the brain-computer interface

Az egyik izgalmas téma az agy-számítógép felület összekapcsolása

to wearable computers.

a hordozható számítógépeknél.

You already have a computer on your head.

Már van egy számítógép a fejünkben.

The brain will be a natural interface.

Az agy természetes csatolási felület.

It is not only about controlling a computer.

Ez nem csak a számítógép vezérléséről szól.

The natural BCI also provides

A természetes BCI másik módot is kínál

another way for people to communicate with people.

az emberekkel való kommunikációra.

For example, it allows people who are not able to speak

Pl. a némák is

kommunikálhatnak másokkal,

to communicate with others,

or such as when privacy or silence are required.

vagy megoldás, amikor a magánélet vagy csend miatt szükséges.

If your idea of nature is a lovely forest,

Ha a természetről alkotott elképzelésük egy szép erdő,

you could wonder how natural this could be.

azon tűnődhetnek, hogy ez mennyire természetes lehet.

My answer is, it's natural language,

A válaszom az, hogy ez természetes nyelv,

it's the natural thought process that you are using.

ez a természetes gondolkodási folyamat, amelyet használunk.

There are no unnatural implants in your body.

Szervezetünkben nincsenek természetellenes implantátumok.

I am challenging you to think

Gondolkodjanak el azon,

about what you regard as natural communication.

mit tartanak természetes kommunikációnak.

Turning the speech in your mind into words.

Az elménkben lévő beszéd szavakká alakítását?

There is a standard way to finish up when talking with people --

Szokásos módja, hogy befejezzük a beszélgetést:

you say: “Just think about it.”

„Csak gondolj bele!”

I hope you are as excited as we are

Remélem, ugyanúgy fel vannak dobva, mint mi

for the prospect of a future

az olyan jövő kilátásai miatt,

in which, when you just think about something,

amelyben amikor valami eszünkbe jut,

the words in your mind appear on screen.

az elménkben lévő szavak megjelennek a képernyőn.

Thank you.

Köszönöm.

(Applause)

(Taps)