The thrilling potential of SixthSense technology | Pranav Mistry

Pranav Mistry : l'excitant potentiel de SixthSense

Traducteur: Daniel Winter Relecteur: Jerome Faul

We grew up

Nous avons tous grandi

interacting with the physical objects around us.

en interagissant avec les objets physiques autour de nous.

There are an enormous number of them that we use every day.

Il y a énormément d'objets

que nous utilisons tous les jours.

Unlike most of our computing devices,

Contrairement à nos appareils informatiques,

these objects are much more fun to use.

ces objets sont beaucoup plus amusants à utiliser.

Quand on parle d'objets,

When you talk about objects,

one other thing automatically comes attached to that thing,

quelque chose d'autre vient immédiatement à l'esprit,

and that is gestures:

ce sont les gestes :

how we manipulate these objects,

comment nous manipulons ces objets,

how we use these objects in everyday life.

comment nous les utilisons dans notre quotidien.

We use gestures not only to interact with these objects,

Nous employons des gestes non seulement pour interagir avec ces objets,

but we also use them to interact with each other.

mais aussi pour interagir entre nous.

A gesture of "Namaste!", maybe, to respect someone, or maybe,

Un geste de "Namaste!", par exemple, pour montrer son respect,

ou encore...

in India I don't need to teach a kid that this means

En Inde, je n'ai pas besoin d'apprendre un enfant que ceci signifie

"four runs" in cricket.

un "four" au cricket.

It comes as a part of our everyday learning.

Ça fait partie du langage de tous les jours.

So, I am very interested, from the beginning,

Donc, ça m'intéresse beaucoup,

depuis le début, comment...

how our knowledge about everyday objects and gestures,

Comment notre connaissance

des objets et gestes de tous les jours

and how we use these objects,

et de l'usage de ces objets,

can be leveraged to our interactions with the digital world.

peut être intégrée dans nos interactions avec le monde numérique.

Rather than using a keyboard and mouse,

Plutôt que d'utiliser un clavier et une souris,

why can I not use my computer

pourquoi ne pas employer son ordinateur

in the same way that I interact in the physical world?

de la même façon qu'on interagit avec le monde physique ?

So, I started this exploration around eight years back,

Donc, j'ai commencé cette recherche il y a huit ans,

and it literally started with a mouse on my desk.

et tout a littéralement commencé avec une souris sur mon bureau.

Rather than using it for my computer, I actually opened it.

Plutôt que de l'utiliser pour mon ordinateur,

je l'ai ouverte.

Most of you might be aware that, in those days,

Vous êtes sans doute au courant que, à cette époque,

the mouse used to come with a ball inside,

la souris avait une boule à l'intérieur,

and there were two rollers

et il y avait deux rouleaux

that actually guide the computer where the ball is moving,

qui indiquaient à l'ordinateur comment la boule roulait,

and, accordingly, where the mouse is moving.

et, par conséquent, où la souris se déplaçait.

So, I was interested in these two rollers,

Donc, je m'intéressais à ces deux rouleaux,

and I actually wanted more, so I borrowed another mouse from a friend --

et j'en voulais plus, donc j'ai demandé à un ami qu'il me prête une souris...

never returned to him --

Je ne l'ai jamais rendue...

and I now had four rollers.

Et finalement j'avais quatre rouleaux.

Interestingly, what I did with these rollers is,

Curieusement, ce que j'ai fait avec ces rouleaux, c'est,

basically, I took them off of these mouses and then put them in one line.

en gros, je les ai enlevés des souris

et je les ai alignés.

It had some strings and pulleys and some springs.

Il y avait quelques fils, des poulies et des ressorts.

What I got is basically a gesture-interface device

Je me suis retrouvé avec une interface gestuelle,

that actually acts as a motion-sensing device

se comportant comme un capteur de mouvement

made for two dollars.

qui m'a coûté deux dollars.

So, here, whatever movement I do in my physical world

Donc, ici, tous mes mouvements dans le monde physique

is actually replicated inside the digital world

sont reproduits dans le monde numérique

just using this small device that I made, around eight years back,

simplement en utilisant ce dispositif que j'ai construit il y a huit ans,

in 2000.

en 2000.

Because I was interested in integrating these two worlds,

Parce que je voulais intégrer ces deux mondes,

I thought of sticky notes.

j'ai pensé aux mémos.

I thought, "Why can I not connect

Je me suis demandé : "Pourquoi pas connecter

the normal interface of a physical sticky note

l'interface usuelle d'un mémo physique

to the digital world?"

à une interface numérique ?".

A message written on a sticky note to my mom,

Un message écrit sur un mémo à ma mère

on paper,

sur du papier

can come to an SMS,

pourrait devenir un SMS,

or maybe a meeting reminder

ou encore un rappel pour une réunion

automatically syncs with my digital calendar --

se synchronise automatiquement avec mon agenda numérique...

a to-do list that automatically syncs with you.

Une liste de choses à faire qui s'adapte systématiquement à vous.

But you can also search in the digital world,

Mais vous pouvez aussi faire des recherches dans le monde numérique,

or maybe you can write a query, saying,

par exemple vous pouvez demander

"What is Dr. Smith's address?"

"Quelle est l'adresse du Dr Smith ?"

and this small system actually prints it out --

et ce petit système l'imprime...

so it actually acts like a paper input-output system,

donc c'est comme un système d'entrée et sortie de données en papier,

just made out of paper.

fait juste avec du papier.

In another exploration,

Lors d'une autre recherche,

I thought of making a pen that can draw in three dimensions.

j'ai pensé à faire un stylo qui dessine dans les trois dimensions.

So, I implemented this pen that can help designers and architects

Donc j'ai créé ce stylo

utile aux concepteurs et architectes

not only think in three dimensions,

non seulement pour penser en 3D,

but they can actually draw,

mais pour dessiner aussi

so that it's more intuitive to use that way.

et on s'en sert donc beaucoup plus intuitivement.

Then I thought, "Why not make a Google Map,

Après je me suis dit : "Pourquoi pas une Google Map,

but in the physical world?"

mais dans le monde physique ?"

Rather than typing a keyword to find something,

Plutôt que d'entrer un mot-clé pour trouver quelque chose,

I put my objects on top of it.

je mets des objets dessus.

If I put a boarding pass, it will show me where the flight gate is.

Si c'est un billet d'avion, ça me montre où est la porte d'embarquement.

A coffee cup will show where you can find more coffee,

Une tasse de café me montre où trouver plus de café

or where you can trash the cup.

ou bien là où je peux jeter la tasse.

So, these were some of the earlier explorations I did

Donc, c'étaient les premières recherches que j'ai faites

because the goal was to connect these two worlds seamlessly.

en essayant d'amalgamer ces deux mondes.

Among all these experiments,

Dans toutes ces expériences,

there was one thing in common:

il y a avait une chose en commun :

I was trying to bring a part of the physical world

j'essayais d'apporter une partie du monde physique dans le monde numérique.

to the digital world.

Je prenais quelque chose des objets

I was taking some part of the objects,

or any of the intuitiveness of real life,

ou de l'intuitivité de la vie réelle,

and bringing them to the digital world,

et je l'intégrais dans le monde numérique,

because the goal was to make our computing interfaces more intuitive.

parce que le but était de rendre nos interfaces informatiques plus intuitives.

But then I realized that we humans are not actually interested in computing.

Mais là je me suis rendu compte que nous humains

ne sommes pas vraiment intéressés par l'informatique.

What we are interested in is information.

Ce qui nous intéresse, c'est l'information.

We want to know about things.

On veut savoir plus sur les choses.

We want to know about dynamic things going around.

On veut connaître la dynamique de tout ce qui nous entoure.

So I thought, around last year -- in the beginning of the last year --

Donc je me suis dit, l'année dernière, au début de l'année dernière...

I started thinking, "Why can I not take this approach in the reverse way?"

Je me suis dit : "Pourquoi ne pas prendre cette approche dans l'autre sens ?".

Plutôt : "Et si je prenais mon monde numérique

Maybe, "How about I take my digital world

and paint the physical world with that digital information?"

et garnissais mon monde physique avec cette information numérique ?"

Parce que les pixels sont, en ce moment, enfermés dans ces appareils rectangulaires

Because pixels are actually, right now, confined in these rectangular devices

qui rentrent dans nos poches.

that fit in our pockets.

Why can I not remove this confine

Pourquoi ne pas les libérer

and take that to my everyday objects, everyday life

et les apporter à mes objets et ma vie de tous les jours

so that I don't need to learn the new language

de sorte à ne plus avoir à apprendre un nouveau langage

for interacting with those pixels?

pour interagir avec ces pixels?

So, in order to realize this dream,

Donc, pour réaliser ce rêve,

I actually thought of putting a big-size projector on my head.

j'ai pensé à mettre un grand projecteur sur ma tête.

I think that's why this is called a head-mounted projector, isn't it?

Je crois que c'est pour cela que ça s'appelle un casque vidéoprojecteur, n'est-ce pas ?

I took it very literally,

Je pensais très littéralement,

and took my bike helmet,

et j'ai pris mon casque de vélo,

put a little cut over there so that the projector actually fits nicely.

j'ai même fait une petite incision pour que je projecteur s'encastre.

So now, what I can do --

Donc maintenant, ce que je peux faire...

I can augment the world around me with this digital information.

Je peux enrichir le monde qui m'entoure avec de l'information numérique.

But later,

Mais plus tard,

I realized that I actually wanted to interact

je me suis rendu compte que je voulais aussi interagir avec ces pixels.

with those digital pixels, also.

So I put a small camera over there that acts as a digital eye.

Donc j'ai placé une petite caméra là-dessus,

qui joue le rôle d'un œil numérique.

Later, we moved to a much better,

Ensuite, nous avons progressé vers une meilleure

consumer-oriented pendant version of that,

version, en forme de pendentif, pour les consommateurs

that many of you now know as the SixthSense device.

que plusieurs d'entre vous connaissez sous le nom de SixthSense.

But the most interesting thing about this particular technology

Mais le plus intéressant dans cette technologie,

is that you can carry your digital world with you

c'est que l'on peut porter son monde numérique avec soi

wherever you go.

où que l'on aille.

You can start using any surface, any wall around you,

Vous pouvez utiliser n'importe quelle surface, n'importe quel mur autour de vous,

as an interface.

comme une interface.

The camera is actually tracking all your gestures.

La caméra suit tous vos gestes.

Whatever you're doing with your hands,

Quoique vous fassiez avec les mains,

it's understanding that gesture.

la caméra comprend vos gestes.

And, actually, if you see, there are some color markers

Et, au fait, vous voyez, il y a des marqueurs colorés

that in the beginning version we are using with it.

que nous utilisons avec la caméra dans la version initiale.

You can start painting on any wall.

On peut peindre les murs.

You stop by a wall, and start painting on that wall.

Vous vous arrêtez devant un mur, et commencez à le peindre.

But we are not only tracking one finger, here.

Mais on ne suit pas qu'un seul doigt ici.

We are giving you the freedom of using all of both of your hands,

On vous donne la liberté d'employer vos deux mains,

so you can actually use both of your hands to zoom into or zoom out

donc vous pouvez les utiliser pour zoomer en avant et en arrière

of a map just by pinching all present.

sur un plan, juste en pinçant où il faut.

The camera is actually doing -- just, getting all the images --

La caméra est en fait...

bref, elle prend toutes les images...

is doing the edge recognition and also the color recognition

elle reconnaît tous les gestes mais aussi les couleurs

and so many other small algorithms are going on inside.

et pour cela beaucoup de petits algorithmes sont nécessaires.

So, technically, it's a little bit complex,

Donc, techniquement, c'est un peu complexe,

but it gives you an output which is more intuitive to use, in some sense.

mais le résultat est une interface beaucoup plus intuitive, en quelque sorte.

But I'm more excited that you can actually take it outside.

Mais le plus excitant, c'est que l'on peut le porter à l'extérieur.

Rather than getting your camera out of your pocket,

Plutôt que de sortir un appareil photo de sa poche,

you can just do the gesture of taking a photo,

on peut juste faire le geste de prendre une photo

and it takes a photo for you.

et la photo est prise.

(Applause)

(Applaudissements)

Thank you.

Merci.

And later I can find a wall, anywhere,

Et puis devant un mur, n'importe où,

and start browsing those photos

je peux parcourir ces photos,

or maybe, "OK, I want to modify this photo a little bit

et par exemple : 'OK, je veux modifier cette photo un peu

and send it as an email to a friend."

et l'envoyer à un ami par e-mail."

So, we are looking for an era

Donc, nous sommes en face d'une époque où

where computing will actually merge with the physical world.

l'informatique se fond avec le monde physique.

And, of course, if you don't have any surface,

Et, bien sûr, s'il n'y a aucune surface,

you can start using your palm for simple operations.

vous pouvez toujours utiliser votre paume pour des fonctions plus simple.

Here, I'm dialing a phone number just using my hand.

Ici, je compose un numéro de téléphone juste sur ma main.

The camera is actually not only understanding your hand movements,

La caméra ne comprend pas seulement les gestes,

but, interestingly,

mais aussi, ce qui est intéressant,

is also able to understand what objects you are holding in your hand.

elle identifie les objets que l'on tient dans les mains.

Ce que l'on fait ici...

For example, in this case,

Par exemple, ici,

the book cover is matched

la couverture du livre est comparée

with so many thousands, or maybe millions of books online,

aux milliers, voire millions, de livres en ligne,

and checking out which book it is.

pour vérifier de quel livre il s'agit.

Once it has that information,

Dès que cette information est obtenue,

it finds out more reviews about that,

il trouve des critiques sur le livre,

or maybe New York Times has a sound overview on that,

ou il se peut que le New York Times ait un résumé audio

so you can actually hear, on a physical book,

de sorte que l'on peut écouter, avec un livre physique,

a review as sound.

une critique sous forme sonore.

(Video) Famous talk at Harvard University --

("...célèbre discours à l'Université de Harvard...")

This was Obama's visit last week to MIT.

C'était la visite de Obama au MIT la semaine dernière.

(Video) And particularly I want to thank two outstanding MIT --

("...et je voudrais remercier en particulier deux remarquables...")

Pranav Mistry: So, I was seeing the live [video] of his talk,

Donc, j'assistais ce discours en direct, à l'air libre, juste sur un journal.

outside, on just a newspaper.

Your newspaper will show you live weather information

Votre journal pourra vous montrer la météo en direct

rather than having it updated.

plutôt que de l'actualiser... car d'habitude vous devez vérifier avec votre ordinateur

You have to check your computer in order to do that, right?

pour faire ça, n'est-ce pas?

(Applause)

(Applaudissements)

When I'm going back, I can just use my boarding pass

Au retour, je me sers juste du billet d'avion

to check how much my flight has been delayed,

pour savoir de combien de temps mon vol a été retardé,

because at that particular time,

parce que à ce moment là,

I'm not feeling like opening my iPhone,

je n'ai pas envie d'ouvrir mon iPhone

and checking out a particular icon.

et de vérifier une certain icône.

And I think this technology will not only change the way --

Et je crois que cette technologie ne va pas seulement changer la façon dont...

(Laughter)

Oui. (Rires)

Yes.

It will change the way we interact with people, also,

Elle va aussi changer la façon dont les personnes interagissent entre elles,

not only the physical world.

non seulement avec le monde physique.

The fun part is, I'm going to the Boston metro,

Ce qui est marrant, c'est, je prends le métro de Boston

and playing a pong game inside the train on the ground, right?

et joue une partie de Pong dans la rame

par terre, n'est-ce pas ?

(Laughter)

(Rires)

And I think the imagination is the only limit

Et je crois que l'imagination est la seule limite

of what you can think of

de ce que l'on peut envisager

when this kind of technology merges with real life.

lorsque cette sorte de technologie se fond avec la vie quotidienne.

But many of you argue, actually,

Mais vous pouvez dire, en fait, que

that all of our work is not only about physical objects.

notre travail ne résume pas à des objets physiques.

We actually do lots of accounting and paper editing

On travail beaucoup en comptabilité et en rédaction

and all those kinds of things; what about that?

et toutes ces choses ; et à ce propos ?

And many of you are excited about the next-generation tablet computers

Beaucoup d'entre vous attendent impatiemment que la nouvelle génération de tablettes informatiques

to come out in the market.

sorte sur le marché.

So, rather than waiting for that,

Mais, plutôt que d'attendre cela,

I actually made my own, just using a piece of paper.

j'ai construit ma propre tablette, juste avec une feuille de papier.

So, what I did here is remove the camera --

Donc, ce que j'ai fait, j'ai enlevé la caméra...

All the webcam cameras have a microphone inside the camera.

Toutes les webcams ont un microphone à l'intérieur.

I removed the microphone from that,

J'ai enlevé le microphone de tout cela,

and then just pinched that --

et je l'ai juste clipsé...

like I just made a clip out of the microphone --

En fait j'ai fait un clip avec le microphone...

and clipped that to a piece of paper, any paper that you found around.

Et je l'ai clipsé sur une feuille de papier, une feuille comme toutes les autres.

So now the sound of the touch

Donc là le son du toucher

is getting me when exactly I'm touching the paper.

indique quand est-ce que je touche vraiment le papier.

But the camera is actually tracking where my fingers are moving.

Mais en plus la caméra suit toujours où mes doigts se meuvent.

You can of course watch movies.

Vous pouvez bien sûr voir des films.

(Video) Good afternoon. My name is Russell,

("Bonjour. Mon nom est Russell...")

and I am a Wilderness Explorer in Tribe 54."

("...et je suis un Explorateur de Régions Sauvages dans la Tribu 54.")

PM: And you can of course play games.

Et on peut bien sûr jouer avec.

(Car engine)

(Moteur de voiture)

Here, the camera is actually understanding how you're holding the paper

Ici, la caméra détecte comment vous tenez la feuille de papier

and playing a car-racing game.

en jouant un jeu de course.

(Applause)

(Applaudissements)

Many of you already must have thought, OK, you can browse.

Vous avez peut-être déjà pensé : "OK, et l'on peut naviguer."

Oui. On peut bien sûr naviguer sur n'importe quel site Internet

Yeah. Of course you can browse to any websites

or you can do all sorts of computing on a piece of paper

et faire toute sorte d'informatique sur une feuille de papier

wherever you need it.

à tout moment.

So, more interestingly,

Donc, ce qui est plus intéressant,

I'm interested in how we can take that in a more dynamic way.

je cherche plutôt comment rendre ça plus dynamique.

When I come back to my desk, I can just pinch that information

Dès que je suis à nouveau à mon bureau je peux transférer cette information

back to my desktop

sur le bureau de l'ordinateur

so I can use my full-size computer.

pour utiliser mon ordinateur complet.

(Applause)

(Applaudissements)

And why only computers? We can just play with papers.

Mais pourquoi seulement les ordinateurs ? On peut s'amuser avec juste du papier.

Paper world is interesting to play with.

Le monde du papier est fascinant.

Here, I'm taking a part of a document,

Ici, je prends une partie du document

and putting over here a second part from a second place,

et je rajoute une deuxième partie provenant d'une autre source...

and I'm actually modifying the information that I have over there.

Et je peux modifier l'information

que j'avais là.

Yeah. And I say, "OK, this looks nice, let me print it out, that thing."

Ouais. Et je me dis : "OK, c'est pas mal,

imprimons donc ça."

So I now have a print-out of that thing.

Donc j'obtiens la version imprimée, et maintenant...

So the workflow is more intuitive,

Le flux de travail est plus intuitif qu'il y a,

the way we used to do it maybe 20 years back,

je dirais il y a 20 ans,

rather than now switching between these two worlds.

lorsqu'on devait encore basculer entre ces deux mondes.

So, as a last thought,

Donc, pour conclure,

I think that integrating information to everyday objects

je crois qu'intégrer de l'information dans les objets de tous les jours

ne va pas seulement nous aider à nous débarrasser de la fracture numérique,

will not only help us to get rid of the digital divide,

the gap between these two worlds,

l'écart entre ces deux mondes,

but will also help us, in some way,

mais va aussi nous aider, en quelque sorte,

to stay human,

à rester humains,

to be more connected to our physical world.

à être plus rattachés à notre monde physique.

And it will actually help us not end up being machines

Et cela va nous aider, en fait, à ne pas devenir des machines

sitting in front of other machines.

assises devant d'autres machines.

That's all. Thank you.

C'est tout. Merci.

(Applause)

(Applaudissements)

Thank you.

Merci.

(Applause)

(Applaudissements)

Chris Anderson: So, Pranav, first of all, you're a genius.

[Chris Anderson] Donc, Pranav,

tout d'abord, vous êtes un génie.

This is incredible, really.

C'est incroyable, vraiment.

What are you doing with this? Is there a company being planned?

Qu'est-ce que tu comptes faire avec ? Tu envisages créer une entreprise ?

Or is this research forever, or what?

Ou ça sera toujours de la recherche, ou quoi encore?

Pranav Mistry: So, there are lots of companies,

[Pranav Mistry] Donc, il y a plusieurs entreprises

sponsor companies of Media Lab interested in taking this ahead

qui financent le Media Lab...

Intéressées à faire avancer ceci d'une façon ou d'une autre.

in one or another way.

Companies like mobile-phone operators

Des opérateurs de téléphones mobiles

want to take this in a different way than the NGOs in India,

veulent mener ceci différemment des ONG en Inde,

thinking, "Why can we only have 'Sixth Sense'?

qui se disent : "Pourquoi seulement un 'Sixième Sens' ?

We should have a 'Fifth Sense' for missing-sense people who cannot speak.

Il nous faut un 'Cinquième Sens' pour ceux à qui il manque un sens

ou ne peuvent pas parler.

This technology can be used for them to speak out in a different way

Cette technologie pourrait les permettre de parler d'une autre façon

maybe a speaker system."

avec un haut parleur, par exemple.

CA: What are your own plans? Are you staying at MIT,

[CA] Quelles sont vos projets ? Vous restez au MIT,

or are you going to do something with this?

ou vous comptez faire quelque chose avec ça ?

[PM] Je veux que ce soit disponible pour tous

PM: I'm trying to make this more available to people

pour que chacun puisse développer son propre appareil SixthSense

so that anyone can develop their own SixthSense device,

car la technologie n'est pas si difficile à fabriquer,

because the hardware is actually not that hard to manufacture

or hard to make your own.

ou à faire soi-même.

We will provide all the open source software for them,

On mettra à disposition tout le logiciel en open source,

maybe starting next month.

peut-être dans un mois.

CA: Open source? Wow.

[CA] Open source ? Wow.

(Applause)

(Applaudissements)

CA: Are you going to come back to India with some of this, at some point?

[CA] Et vous comptez retourner en Inde avec ça, à un moment donné?

PM: Yeah. Yes, yes, of course.

[PM] Oui. Oui, oui, bien sûr.

CA: What are your plans? MIT? India?

[CA] Et vos projets ? MIT ?

How are you going to split your time going forward?

Inde ? Comment allez-vous gérer votre temps dorénavant ?

PM: There is a lot of energy here. Lots of learning.

[PM] Il y a beaucoup d'énergie ici. Beaucoup d'apprentissage.

All of this work that you have seen is all about my learning in India.

Tout ce travail que vous avez vu ici repose

sur mes expériences en Inde.

And now, if you see, it's more about the cost-effectiveness:

Donc, si vous considérez la rentabilité :

this system costs you $300

ce système coûte 300 dollars

compared to the $20,000 surface tables, or anything like that.

comparé aux surfaces tactiles de 20 000 dollars ou environ.

Or maybe even the $2 mouse gesture system at that time was costing around $5,000?

Ou alors le système gestuel de deux dollars, fait d'une souris,

à l'époque coûtait peut-être 5 000 dollars ?

I showed that, at a conference, to President Abdul Kalam, at that time,

Donc, en fait... J'ai montré cela, lors d'une conférence,

au Président Abdul Kalam, à l'époque,

and then he said, "OK, we should use this in Bhabha Atomic Research Centre

et il a dit "OK, on devrait utiliser cela au Centre de Recherche Atomique de Bhabha

for some use of that."

pour le mettre en usage."

So I'm excited about how I can bring the technology to the masses

Donc je suis très enthousiasmé pour apporter cette technologie aux masses

rather than just keeping that technology in the lab environment.

plutôt que de restreindre la technologie aux labos.

(Applause)

(Applaudissements)

CA: Based on the people we've seen at TED,

[CA] Parmi tous ceux que j'ai vus au TED,

I would say you're truly one of the two or three

je dirais que vous êtes l'un des deux ou trois

best inventors in the world right now.

meilleurs inventeurs au monde en ce moment.

It's an honor to have you at TED.

C'est une honneur vous avoir au TED.

Thank you so much.

Merci beaucoup.

That's fantastic.

C'est fantastique.

(Applause)

(Applaudissements)