Dennis Hong: Making a car for blind drivers

Vertaald door: Christel Foncke Nagekeken door: Els De Keyser

Many believe driving is an activity

Velen geloven dat rijden een activiteit is

solely reserved for those who can see.

die gereserveerd is voor degenen die kunnen zien.

A blind person driving a vehicle safely and independently

Een blinde die een voertuig veilig en zelfstandig bestuurt,

was thought to be an impossible task, until now.

werd als onmogelijk beschouwd, tot nu toe.

Hello, my name is Dennis Hong,

Hallo, mijn naam is Dennis Hong,

and we're bringing freedom and independence to the blind

en we brengen vrijheid en onafhankelijkheid voor de blinden

by building a vehicle for the visually impaired.

door een voertuig te bouwen voor visueel gehandicapten.

So before I talk about this car for the blind,

Voordat ik praat over deze auto voor de blinden,

let me briefly tell you about another project that I worked on

wil ik kort iets vertellen over een ander project waaraan

called the DARPA Urban Challenge.

ik heb gewerkt: de DARPA Urban Challenge.

Now this was about building a robotic car

Dit ging over de bouw van een robot-auto

that can drive itself.

die zelf kan rijden.

You press start, nobody touches anything,

Je drukt op start, niemand raakt iets aan.

and it can reach its destination fully autonomously.

Hij kan zijn bestemming volledig autonoom bereiken.

So in 2007, our team won half a million dollars

In 2007 won ons team een half miljoen dollar

by placing third place in this competition.

met een derde plaats in deze wedstrijd.

So about that time,

Rond die tijd daagde

the National Federation of the Blind, or NFB,

de Nationale Federatie van de Blinden, of NFB,

challenged the research committee

de onderzoekscommissie uit

about who can develop a car

een auto te ontwikkelen

that lets a blind person drive safely and independently.

waarmee een blinde persoon veilig en zelfstandig kan rijden.

We decided to give it a try,

We besloten het eens uit te proberen,

because we thought, "Hey, how hard could it be?"

omdat we dachten dat het niet moeilijk zou zijn.

We have already an autonomous vehicle.

We hadden al een autonoom voertuig.

We just put a blind person in it and we're done, right?

We zetten er een blinde persoon in en we zijn klaar.

(Laughter)

(Gelach)

We couldn't have been more wrong.

We konden niet meer verkeerd geweest zijn.

What NFB wanted

Wat het NFB wilde,

was not a vehicle that can drive a blind person around,

was niet een voertuig dat een blinde persoon kan rondrijden,

but a vehicle where a blind person can make active decisions and drive.

maar een voertuig waarin een blinde persoon actief beslissingen kan maken en rijden.

So we had to throw everything out the window

We moesten alles overboord gooien

and start from scratch.

en vanaf nul beginnen.

So to test this crazy idea,

Dus om dit gekke idee te testen,

we developed a small dune buggy prototype vehicle

ontwikkelden we een prototype, een kleine duinbuggy,

to test the feasibility.

om de haalbaarheid te testen.

And in the summer of 2009,

In de zomer van 2009

we invited dozens of blind youth from all over the country

nodigden we tientallen blinde jongeren uit, uit alle hoeken van het land,

and gave them a chance to take it for a spin.

en gaven hen een kans een ritje te maken.

It was an absolutely amazing experience.

Het was absoluut een ongelooflijke ervaring.

But the problem with this car was

Maar het probleem met deze auto was

it was designed to only be driven in a very controlled environment,

dat hij ontworpen werd om alleen gebruikt te worden in een zeer gecontroleerde omgeving,

in a flat, closed-off parking lot --

op een vlakke afgesloten parkeerplaats -

even the lanes defined by red traffic cones.

met rijstroken afgezet met rode kegels.

So with this success,

Door dit succes

we decided to take the next big step,

besloten we om een volgende grote stap te zetten,

to develop a real car that can be driven on real roads.

om een echte auto te ontwikkelen die op echte wegen kan rijden.

So how does it work?

Hoe werkt het?

Well, it's a rather complex system,

Het is een vrij complex systeem.

but let me try to explain it, maybe simplify it.

Ik zal proberen het eenvoudig uit te leggen.

So we have three steps.

Er zijn drie stappen.

We have perception, computation

We hebben perceptie, berekening

and non-visual interfaces.

en niet-visuele interfaces.

Now obviously the driver cannot see,

De chauffeur kan uiteraard niet zien,

so the system needs to perceive the environment

het systeem moet de omgeving waarnemen

and gather information for the driver.

en informatie verzamelen voor de chauffeur.

For that, we use an initial measurement unit.

Daarvoor gebruiken we een eerste meeteenheid.

So it measures acceleration, angular acceleration --

Die meet versnelling, hoekversnelling -

like a human ear, inner ear.

zoals een menselijk oor, binnenoor.

We fuse that information with a GPS unit

We voegen die informatie samen met een gps

to get an estimate of the location of the car.

om een schatting van de locatie van de auto te krijgen.

We also use two cameras to detect the lanes of the road.

We gebruiken twee camera’s om de rijstroken van de weg te detecteren.

And we also use three laser range finders.

We gebruiken drie laser afstandsmeters.

The lasers scan the environment to detect obstacles --

De lasers scannen de omgeving om obstakels te detecteren -

a car approaching from the front, the back

een naderende auto aan de voorkant, de achterkant

and also any obstacles that run into the roads,

en ook eventuele obstakels op de wegen,

any obstacles around the vehicle.

of rondom het voertuig.

So all this vast amount of information is then fed into the computer,

Deze enorme hoeveelheid informatie wordt vervolgens in de computer ingevoerd.

and the computer can do two things.

De computer kan twee dingen doen.

One is, first of all, process this information

Eén daarvan is, om te beginnen, deze informatie verwerken

to have an understanding of the environment --

om de omgeving te begrijpen -

these are the lanes of the road, there's the obstacles --

Dit zijn de rijstroken, daar zijn de obstakels -

and convey this information to the driver.

en deze informatie overbrengen aan de chauffeur.

The system is also smart enough

Het systeem is ook slim genoeg

to figure out the safest way to operate the car.

om de veiligste manier te vinden om de auto te bedienen.

So we can also generate instructions

We kunnen ook instructies genereren

on how to operate the controls of the vehicle.

over hoe de instrumenten van het voertuig te gebruiken.

But the problem is this: How do we convey

Maar het probleem is: hoe kunnen we

this information and instructions

deze informatie en instructies overbrengen

to a person who cannot see

aan een persoon die niet kan zien,

fast enough and accurate enough so he can drive?

snel en accuraat genoeg, zodat hij kan rijden?

So for this, we developed many different types

Daarvoor ontwikkelden we veel verschillende soorten

of non-visual user interface technology.

van niet-visuele gebruikersinterfacetechnologie.

So starting from a three-dimensional ping sound system,

Een driedimensionaal ping-geluidssysteem,

a vibrating vest,

een trillende vest,

a click wheel with voice commands, a leg strip,

een klikwiel met gesproken commando's, een beenstrip,

even a shoe that applies pressure to the foot.

zelfs een schoen die druk uitoefent op de voet.

But today we're going to talk about

Vandaag wil ik het hebben over

three of these non-visual user interfaces.

drie van deze niet-visuele gebruikersinterfaces.

Now the first interface is called a DriveGrip.

De eerste interface heet een DriveGrip.

So these are a pair of gloves,

Dit zijn een paar handschoenen.

and it has vibrating elements on the knuckle part

Ze hebben vibrerende elementen op het knokkeldeel,

so you can convey instructions about how to steer --

zo kan je instructies overbrengen over hoe te sturen -

the direction and the intensity.

de richting en de intensiteit.

Another device is called SpeedStrip.

Een ander apparaat heet SpeedStrip.

So this is a chair -- as a matter of fact, it's actually a massage chair.

Dit is een stoel - het is eigenlijk een massagestoel.

We gut it out, and we rearrange the vibrating elements in different patterns,

We verbouwden hem en herschikten de vibrerende elementen in verschillende patronen,

and we actuate them to convey information about the speed,

zodat ze informatie over de snelheid overbrengen,

and also instructions how to use the gas and the brake pedal.

en ook instructies over hoe de gas- en het rempedaal te gebruiken.

So over here, you can see

Hier kun je zien

how the computer understands the environment,

hoe de computer de omgeving begrijpt.

and because you cannot see the vibration,

Omdat je de vibratie niet kunt zien, hebben we

we actually put red LED's on the driver so that you can see what's happening.

rode LED's op de chauffeur gezet, zodat hij daadwerkelijk kan zien wat er gebeurt.

This is the sensory data,

Dit zijn de zintuiglijke gegevens.

and that data is transferred to the devices through the computer.

Die gegevens worden overgedragen aan de apparaten via de computer.

So these two devices, DriveGrip and SpeedStrip,

Deze twee apparaten, DriveGrip en SpeedStrip,

are very effective.

zijn zeer effectief.

But the problem is

Het probleem is:

these are instructional cue devices.

dit zijn apparaten die instructies geven.

So this is not really freedom, right?

Geen echte vrijheid, nietwaar?

The computer tells you how to drive --

De computer vertelt je hoe je moet rijden -

turn left, turn right, speed up, stop.

linksaf, rechtsaf, versnellen, stoppen.

We call this the "backseat-driver problem."

We noemen dit het achterbank-chauffeur-probleem.

So we're moving away from the instructional cue devices,

We zijn afgestapt van de apparaten die instructies geven,

and we're now focusing more

en we zijn nu meer gericht

on the informational devices.

op de informatieve apparaten.

A good example for this informational non-visual user interface

Een goed voorbeeld voor deze informatieve,

is called AirPix.

niet-visuele gebruikersinterface, is de AirPix.

So think of it as a monitor for the blind.

Beschouw het als een monitor voor blinden.

So it's a small tablet, has many holes in it,

Het is een klein tablet met veel gaten in,

and compressed air comes out,

en perslucht die naar buiten komt.

so it can actually draw images.

Het kan beelden tekenen.

So even though you are blind, you can put your hand over it,

Hoewel je blind bent, kun je je hand er overheen leggen,

you can see the lanes of the road and obstacles.

en de rijstroken en obstakels van de weg zien.

Actually, you can also change the frequency of the air coming out

Je kunt ook de frequentie van de uitgaande lucht regelen

and possibly the temperature.

en eventueel de temperatuur.

So it's actually a multi-dimensional user interface.

Het is een multidimensionale interface.

So here you can see the left camera, the right camera from the vehicle

Hier zie je de linkercamera, de rechtercamera van het voertuig

and how the computer interprets that and sends that information to the AirPix.

en hoe de computer dat interpreteert en die informatie doorstuurt aan de AirPix.

For this, we're showing a simulator,

We laten een simulator zien,

a blind person driving using the AirPix.

een blinde persoon die rijdt met behulp van de AirPix.

This simulator was also very useful for training the blind drivers

Deze simulator is zeer nuttig voor de opleiding van de blinde chauffeurs

and also quickly testing different types of ideas

en ook voor het snel testen van verschillende soorten ideeën

for different types of non-visual user interfaces.

voor verschillende soorten van niet-visuele gebruikersinterfaces.

So basically that's how it works.

Dat is in principe hoe het werkt.

So just a month ago,

Een maand geleden,

on January 29th,

op 29 januari,

we unveiled this vehicle for the very first time to the public

onthulden we dit voertuig voor de allereerste keer aan het publiek

at the world-famous Daytona International Speedway

op de wereldberoemde Daytona International Speedway

during the Rolex 24 racing event.

tijdens het Rolex 24 race-evenement.

We also had some surprises. Let's take a look.

We hadden ook enkele verrassingen. Laten we een kijkje nemen.

(Music)

(Muziek)

(Video) Announcer: This is an historic day in January.

(Video) Omroeper: Dit is een historische dag [onduidelijk].

He's coming up to the grandstand, fellow Federationists.

Hij rijdt tot aan de tribune, collega-Federistas.

(Cheering)

(Gejuich)

(Honking)

(Toeteren)

There's the grandstand now.

Hier is de tribune.

And he's [unclear] following that van that's out in front of him.

En hij [onduidelijk] volgt de wagen voor hem.

Well there comes the first box.

Daar komt de eerste doos.

Now let's see if Mark avoids it.

Kan Mark ze vermijden?

He does. He passes it on the right.

Inderdaad. Hij rijdt voorbij aan de rechterkant.

Third box is out. The fourth box is out.

Derde doos komt eraan. En ook de vierde doos.

And he's perfectly making his way between the two.

Hij vindt perfect zijn weg tussen de twee.

He's closing in on the van

Hij komt dichter bij het busje

to make the moving pass.

om het voorbij te steken.

Well this is what it's all about,

Hier draait het allemaal om,

this kind of dynamic display of audacity and ingenuity.

dit dynamische vertoon van durf en vindingrijkheid.

He's approaching the end of the run,

Hij nadert het einde van de rit,

makes his way between the barrels that are set up there.

maakt zijn weg tussen de vaten die daar zijn opgesteld.

(Honking)

(Toeteren)

(Applause)

(Applaus)

Dennis Hong: I'm so happy for you.

Dennis Hong: Ik ben zo blij voor je.

Mark's going to give me a ride back to the hotel.

Mark gaat mij een lift terug naar het hotel geven.

Mark Riccobono: Yes.

Mark Riccobono: Ja.

(Applause)

(Applaus)

DH: So since we started this project,

DH: Sinds we dit project gestart zijn,

we've been getting hundreds of letters, emails, phone calls

ontvingen we honderden brieven, e-mails, telefoontjes

from people from all around the world.

van mensen uit de hele wereld.

Letters thanking us, but sometimes you also get funny letters like this one:

Brieven om ons te bedanken, maar soms kregen we grappige brieven zoals deze:

"Now I understand why there is Braille on a drive-up ATM machine."

"Nu begrijp ik waarom er braille staat op een drive-in-geldautomaat."

(Laughter)

(Gelach)

But sometimes --

Maar soms -

(Laughter)

(Gelach)

But sometimes I also do get --

Soms kreeg ik ook -

I wouldn't call it hate mail --

ik zou het geen haat-mail noemen -

but letters of really strong concern:

maar brieven met grote bezorgdheid:

"Dr. Hong, are you insane,

"Dr Hong, ben je gek,

trying to put blind people on the road?

proberen om blinden op de weg te krijgen?

You must be out of your mind."

Je hebt ze niet alle vijf op een rij. "

But this vehicle is a prototype vehicle,

Dit voertuig is een prototype van het voertuig,

and it's not going to be on the road

en het gaat de weg niet op

until it's proven as safe as, or safer than, today's vehicle.

totdat het zo veilig is, of veiliger dan het voertuig van vandaag.

And I truly believe that this can happen.

Ik geloof echt dat dit kan gebeuren.

But still, will the society,

Zal de maatschappij

would they accept such a radical idea?

zo'n ingrijpend idee aanvaarden?

How are we going to handle insurance?

Wat met de verzekering?

How are we going to issue driver's licenses?

Hoe gaan we rijbewijzen uitgeven?

There's many of these different kinds of hurdles besides technology challenges

Er zijn heel veel verschillende soorten hindernissen, naast de technologische uitdagingen,

that we need to address before this becomes a reality.

die we moeten aanpakken voordat dit werkelijkheid wordt.

Of course, the main goal of this project

Natuurlijk, het belangrijkste doel van dit project

is to develop a car for the blind.

is om een auto te ontwikkelen voor blinden.

But potentially more important than this

Maar potentieel veel belangrijker dan dit

is the tremendous value of the spin-off technology

is de enorme waarde van de spin-off-technologie

that can come from this project.

die uit dit project kan komen.

The sensors that are used can see through the dark,

De sensoren die worden gebruikt, kunnen zien in het donker,

the fog and rain.

in mist en regen.

And together with this new type of interfaces,

Samen met dit nieuwe type van interfaces,

we can use these technologies

kunnen we gebruik maken van deze technologieën

and apply them to safer cars for sighted people.

en ze toepassen om veiliger auto's voor zienden te maken.

Or for the blind, everyday home appliances --

Of alledaagse huishoudelijke apparaten voor de blinden, -

in the educational setting, in the office setting.

in de scholen, in de kantooromgeving.

Just imagine, in a classroom a teacher writes on the blackboard

Stel je voor, in een klaslokaal schrijft een leraar op het bord

and a blind student can see what's written and read

en een blinde student kan zien wat er geschreven staat en het lezen

using these non-visual interfaces.

door gebruik te maken van deze niet-visuele interfaces.

This is priceless.

Dit is onbetaalbaar.

So today, the things I've showed you today, is just the beginning.

De dingen die ik vandaag heb laten zien, zijn nog maar het begin.

Thank you very much.

Hartelijk dank.

(Applause)

(Applaus)