James Patten: The best computer interface? Maybe ... your hands

Vertaald door: Dick Stada Nagekeken door: Roel Verbunt

A computer is an incredibly powerful means

De computer is een ongelofelijk krachtig middel

of creative expression,

om je creatief uit te drukken.

but for the most part,

Die uitdrukking beperkt zich grotendeels tot het scherm

that expression is confined to the screens

of our laptops and mobile phones.

van onze laptop of mobiele telefoon.

And I'd like to tell you a story about

Ik wil je een verhaal vertellen

bringing this power of the computer

over het gebruik van de kracht van de computer

to move things around and interact with us

om dingen te bewegen en met ons te interageren,

off of the screen and into the physical world

weg van het scherm, naar de werkelijkheid

in which we live.

waarin we leven.

A few years ago, I got a call from

Een paar jaar geleden belde een luxe kledingwinkel,

a luxury fashion store called Barneys New York,

Barneys in New York

and the next thing I knew,

en even later

I was designing storefront kinetic sculptures

was ik bewegende kunstwerken aan het ontwerpen

for their window displays.

voor hun etalages.

This one's called "The Chase."

Deze heet 'de achtervolging'.

There are two pairs of shoes,

Er zijn twee paar schoenen:

a man's pair and a woman's pair,

van een man en een vrouw.

and they play out this slow, tense chase

Ze doen een langzame, gevoelige achtervolging,

around the window

de etalage rond.

in which the man scoots up behind the woman

De 'man' schuifelt achter de 'vrouw' aan,

and gets in her personal space,

komt in haar persoonlijke ruimte,

and then she moves away.

en zij beweegt zich weg van hem.

Each of the shoes has magnets in it,

Er zitten magneten in de schoenen.

and there are magnets underneath the table

Onder de tafel zitten ook magneten

that move the shoes around.

die de schoenen doen bewegen.

My friend Andy Cavatorta was building

Mijn vriend Andy Cavatorta heeft een robot-harp gebouwd

a robotic harp for Bjork's Biophilia tour

voor de Biophilia-tour van Björk

and I wound up building the electronics

en ik ging de elektronica maken

and motion control software

en de software voor de afstandsbediening

to make the harps move and play music.

om de harp te laten bewegen en spelen.

The harp has four separate pendulums,

De harp heeft vier gescheiden slingers

and each pendulum has 11 strings,

en elke slinger heeft 11 snaren.

so the harp swings on its axis and also rotates

De harp draait dus om zijn as en roteert

in order to play different musical notes,

om zo verschillende noten te spelen.

and the harps are all networked together

De harpen zijn verbonden in een netwerk,

so that they can play the right notes

zodat ze de goede noten spelen

at the right time in the music.

op het juiste moment in de muziek.

I built an interactive chemistry exhibit

Ik heb een interactieve chemie-tentoonstelling gemaakt

at the Museum of Science and Industry in Chicago,

in het Museum voor Wetenschap en Industrie in Chicago.

and this exhibit lets people use physical objects

De mensen kunnen er voorwerpen gebruiken

to grab chemical elements off of the periodic table

om scheikundige elementen te pakken van een periodiek stelsel

and bring them together to cause

en ze bij elkaar doen

chemical reactions to happen.

voor een chemische reactie.

And the museum noticed that people

Het museum zag dat de mensen er lang mee speelden.

were spending a lot of time with this exhibit,

and a researcher from a science education center

Een onderzoeker van een wetenschaps-educatiecentrum in Australië

in Australia decided to study this exhibit

wilde de tentoonstelling bestuderen

and try to figure out what was going on.

om te onderzoeken wat er aan de hand was.

And she found that the physical objects

Ze ontdekte dat de fysieke voorwerpen hielpen

that people were using were helping people

understand how to use the exhibit,

bij het begrijpen hoe ze de tentoonstelling moesten gebruiken.

and were helping people learn in a social way.

We hielpen mensen leren op een sociale manier.

And when you think about it, this makes a lot of sense,

Als je erover nadenkt, is het logisch

that using specialized physical objects

dat je met speciale fysieke voorwerpen

would help people use an interface more easily.

de bediening makkelijker leert gebruiken.

I mean, our hands and our minds are optimized

Onze handen en onze hersenen

zijn gebouwd om met tastbare voorwerpen om te gaan.

to think about and interact with tangible objects.

Think about which you find easier to use,

Wat vind je makkelijker om te gebruiken?

a physical keyboard or an onscreen keyboard

Een fysiek toetsenbord

of een toetsenbord op een scherm zoals op je mobiel?

like on a phone?

But the thing that struck me

Het viel me bij al deze projecten op

about all of these different projects

is that they really had to be built from scratch,

dat ze allemaal vanuit niets moesten worden opgebouwd,

down to the level of the electronics

tot op het niveau van de elektronica

and the printed circuit boards and

en de elektronische printplaatjes

all the mechanisms all the way up to the software.

en alle mechaniek tot aan de software.

I wanted to create something

Ik wilde iets maken

where we could move objects under computer control

waarbij we voorwerpen konden bewegen met afstandsbediening

and create interactions around that idea

met daar omheen interactie

without having to go through this process

zonder elke keer van nul te moeten beginnen.

of building something from scratch

every single time.

So my first attempt at this

Mijn eerste poging om dat te bereiken,

was at the MIT Media Lab

was in het MIT Media Lab

with Professor Hiroshi Ishii,

van professor Hiroshi Ishii.

and we built this array of

We bouwden deze stapel

512 different electromagnets,

van 512 verschillende elektromagneten,

and together they were able to move objects around

en samen konden ze voorwerpen bewegen

on top of their surface.

bovenop hun oppervlak.

But the problem with this

Het probleem is

was that these magnets

dat deze magneten meer dan $10.000 kosten.

cost over 10,000 dollars.

Although each one was pretty small,

Hoewel ze allemaal klein zijn,

altogether they weighed so much

wegen ze samen zoveel

that the table that they were on

dat de tafel begon door te buigen.

started to sag.

So I wanted to build something

Ik wilde dus iets maken

where you could have this kind of interaction

waar die interactie mogelijk was

on any tabletop surface.

op een normaal tafelblad.

So to explore this idea,

Om dat idee uit te werken

I built an army of small robots,

heb ik een leger kleine robots gemaakt.

and each of these robots has what are called omni wheels.

Elk heeft een 'omni-wiel'.

They're these special wheels

Dat zijn van die wielen

that can move equally easily in all directions,

die makkelijk alle kanten op kunnen bewegen.

and when you couple these robots

Als je deze robots

with a video projector,

aan een videoprojector koppelt,

you have these physical tools

krijg je de fysieke gereedschappen

for interacting with digital information.

voor de uitwisseling van digitale informatie.

So here's an example of what I mean.

Hier is een voorbeeld.

This is a video editing application

Dit is een videobewerk-applicatie

where all of the controls

waar alle bediening

for manipulating the video are physical.

voor videobewerking fysiek is.

So if we want to tweak the color,

Als je de kleur wilt aanpassen

we just enter the color mode,

ga je naar de kleurmodus.

and then we get three different dials

Je hebt dan drie wielen

for tweaking the color,

om de kleur aan te passen.

or if we want to adjust the audio,

Of als je het geluid wilt regelen,

then we get two different dials for that, these physical objects.

heb je twee verschillende wielen om dat fysiek te regelen.

So here the left and right channel stay in sync,

Hier blijven het linkse en rechtse kanaal synchroon.

but if we want to, we can override that

Je kan dat veranderen

by grabbing both of them at the same time.

door ze allebei tegelijk vast te nemen.

So the idea is that we get the speed

Zo krijgen we de voordelen van snelheid en efficiency

and efficiency benefits of using these physical dials

van deze fysieke wielen,

together with the flexibility and versatility

samen met de flexibiliteit en veelzijdigheid

of a system that's designed in software.

van een systeem dat met software gemaakt is.

And this is a mapping application

En dit is een applicatie voor kaarten bij rampenbestrijding.

for disaster response.

So you have these physical objects

Je hebt de fysieke voorwerpen voor

that represent police, fire and rescue,

politie, brandweer en reddingsdiensten

and a dispatcher can grab them

en iets om ze te grijpen

and place them on the map

en op de kaart te zetten,

to tell those units where to go,

om te zeggen waar ze naartoe moeten.

and then the position of the units on the map

De locatie van de eenheden op de kaart

gets synced up with the position

wordt gesynchroniseerd met de locatie van de eenheden in de echte wereld.

of those units in the real world.

This is a video chat application.

Dit is een videochat-toepassing.

It's amazing how much emotion you can convey

Ongelofelijk hoeveel emotie je kwijt kan

with just a few simple movements

met wat beweging

of a physical object.

van een fysiek voorwerp.

With this interface, we open up a huge array of possibilities

Met deze interface krijgen we enorm veel mogelijkheden

in between traditional board games

tussen de traditionele bordspellen

and arcade games,

en speelautomaten.

where the physical possibilities of interaction

Door de fysieke interactie

make so many different styles of play possible.

worden veel spelvariaties mogelijk.

But one of the areas that I'm most excited

Ik ben het meest enthousiast

about using this platform for

over het gebruik van dit platform

is applying it to problems that are difficult

voor problemen die moeilijk op te lossen zijn

for computers or people to solve alone.

voor alleen computers of mensen.

One example of those is protein folding.

Een voorbeeld is vouwen van eiwitten.

So here we have an interface

Hier heb ik een interface

where we have physical handles onto a protein,

waarbij een eiwit handvatten heeft

and we can grab those handles

waarmee we het kunnen bewegen

and try to move the protein and try to fold it in different ways.

en op verschillende manieren te vouwen.

And if we move it in a way that doesn't really make sense

Als we hem bewegen in een richting die nergens op slaat,

with the underlying molecular simulation,

met moleculaire nabootsing,

we get this physical feedback where we can

krijgen we fysieke feedback

actually feel these physical handles

omdat we de handvatten echt voelen terugtrekken.

pulling back against us.

So feeling what's going on

Voelen wat er speelt

inside a molecular simulation

in een molecuul-simulatie

is a whole different level of interaction.

is een heel ander niveau van interactie.

So we're just beginning to explore

We staan aan het begin van een ontdekkingstocht

what's possible when we use software

naar de mogelijkheden om met software de beweging te regelen

to control the movement

of objects in our environment.

van voorwerpen in onze omgeving.

Maybe this is the computer of the future.

Misschien is dit de computer van de toekomst.

There's no touchscreen.

Zonder touchscreen.

There's no technology visible at all.

Er is helemaal geen techniek zichtbaar.

But when we want to have a video chat

Maar als we een videogesprek willen

or play a game

of een spel spelen

or lay out the slides to our next TED Talk,

of de dia's van de volgende TED Talk willen plaatsen

the objects on the table come alive.

dan komen de voorwerpen tot leven.

Thank you.

Dank je wel.

(Applause)

(Applaus)