The thrilling potential of SixthSense technology | Pranav Mistry

Translator: Anton Hikov Reviewer: Nikolay Mihaylov

We grew up

Ние израстнахме,

interacting with the physical objects around us.

взаимодействайки си с физически обекти около нас.

There are an enormous number of them that we use every day.

Има огромен брой от тях,

които използваме всеки ден.

Unlike most of our computing devices,

За разлика от повечето от нашите изчислителни устройства,

these objects are much more fun to use.

тези обекти са много по-забавни за използване.

Когато говорим за предмети,

When you talk about objects,

one other thing automatically comes attached to that thing,

едно друго нещо автоматично идва, заедно с това нещо,

and that is gestures:

и това са жестове:

how we manipulate these objects,

как се манипулират тези предмети,

how we use these objects in everyday life.

как се използват тези предмети в ежедневния живот.

We use gestures not only to interact with these objects,

Използваме жестове не само за да си взаимодействаме с предметите,

but we also use them to interact with each other.

но също ги използваме, за да си взаимодействаме помежду си.

A gesture of "Namaste!", maybe, to respect someone, or maybe,

Жест на "Намасте!", може би, за уважение към някого,

или може би --

in India I don't need to teach a kid that this means

в Индия не е нужно да уча дете, че това означава,

"four runs" in cricket.

"четири" в крикета.

It comes as a part of our everyday learning.

То идва като част от всекидневния ни живот.

So, I am very interested, from the beginning,

Така че аз съм много заинтересован,

от самото начало, по какъв начин --

how our knowledge about everyday objects and gestures,

Как нашето знание

за предмети от бита и жестове,

and how we use these objects,

и как използваме тези предмети,

can be leveraged to our interactions with the digital world.

може да бъде отнесено към взаимоотношенията ни с дигиталния свят.

Rather than using a keyboard and mouse,

Вместо да използвам клавиатура и мишка,

why can I not use my computer

защо да не мога да използвам моя компютър

in the same way that I interact in the physical world?

по същия начин, по който си взаимодействам във физическия свят?

So, I started this exploration around eight years back,

Така че аз започнах това проучване преди около осем години,

and it literally started with a mouse on my desk.

и то буквално започна с мишка върху бюрото ми.

Rather than using it for my computer, I actually opened it.

Вместо да я използвам за моя компютър,

аз всъщност я отворих.

Most of you might be aware that, in those days,

Повечето от вас може да са наясно, че в тези дни,

the mouse used to come with a ball inside,

мишката имаше топче вътре,

and there were two rollers

и имаше две ролки,

that actually guide the computer where the ball is moving,

които действително направляват компютъра, накъде се движи топчето,

and, accordingly, where the mouse is moving.

и, съответно, накъде се движи мишката.

So, I was interested in these two rollers,

Така че, аз се заинтересувах от тези две ролки,

and I actually wanted more, so I borrowed another mouse from a friend --

и всъщност исках повече, така че взех назаем друга мишка от приятел --

never returned to him --

никога не му я върнах обратно --

and I now had four rollers.

и така имах четири ролки.

Interestingly, what I did with these rollers is,

Интересното е, че това, което направих с тези ролки е,

basically, I took them off of these mouses and then put them in one line.

в основни линии, аз ги свалих от тези мишки

и след това ги поставих в една редица.

It had some strings and pulleys and some springs.

Имаше няколко струни и шайби, и няколко пружини.

What I got is basically a gesture-interface device

Това, което направих бе интерфейсно устройство за жестове,

that actually acts as a motion-sensing device

което всъщност действа като сензорно устройство за движение,

made for two dollars.

направено за два долара.

So, here, whatever movement I do in my physical world

Така че, тук, каквото и движение да направя в моя физически свят,

is actually replicated inside the digital world

е действително възпроизведено в света на цифровите технологии,

just using this small device that I made, around eight years back,

използвайки само това малко устройство, което направих,

in 2000.

преди около осем години, през 2000 година.

Because I was interested in integrating these two worlds,

Понеже бях заинтересован от интегрирането на тези два свята,

I thought of sticky notes.

си мислех за лепящи се листчета.

I thought, "Why can I not connect

Помислих си: "Защо да не мога да свържа

the normal interface of a physical sticky note

нормалния интерфейс на физически лепяща се бележка

to the digital world?"

към цифров? "

A message written on a sticky note to my mom,

Писмено съобщение на лепяща се бележка до майка ми

on paper,

на хартия

can come to an SMS,

може да дойде като SMS,

or maybe a meeting reminder

или може би напомняне за среща,

automatically syncs with my digital calendar --

автоматично да се синхронизира с цифровия ми календар --

a to-do list that automatically syncs with you.

един списък със задачи, който автоматично да се синхронизира с вас.

But you can also search in the digital world,

Но също може да търсите в дигиталния свят,

or maybe you can write a query, saying,

или може би, можете да напишете заявка, казвайки:

"What is Dr. Smith's address?"

"Какъв е адресът на д-р Смит?"

and this small system actually prints it out --

и тази малка система действително да го отпечата --

so it actually acts like a paper input-output system,

така че действително да действа като хартиена входно-изходна система,

just made out of paper.

просто направена от хартия.

In another exploration,

В друго проучване,

I thought of making a pen that can draw in three dimensions.

мислех да направя писалка, която да може да пише в три измерения.

So, I implemented this pen that can help designers and architects

Така че аз направих тази писалка,

която може да помогне на дизайнерите и архитектите

not only think in three dimensions,

не само да мислят в три измерения,

but they can actually draw,

но те действително могат да чертаят,

so that it's more intuitive to use that way.

така че тя е по-интуитивна да се използва по този начин.

Then I thought, "Why not make a Google Map,

После си помислих, "Защо да не направя Google Map,

but in the physical world?"

само че във физическия свят? "

Rather than typing a keyword to find something,

Вместо да пиша ключова дума за да намеря нещо,

I put my objects on top of it.

поставих моите обекти върху нея.

If I put a boarding pass, it will show me where the flight gate is.

Ако сложа бордната си карта, това ще ми покаже къде е изхода за полета.

A coffee cup will show where you can find more coffee,

Кафена чашка ще покаже, къде можете да намерите повече кафе,

or where you can trash the cup.

или, къде можете да изхвърлите чашката.

So, these were some of the earlier explorations I did

Така, това са някои от по-ранните изследвания, които направих, понеже

because the goal was to connect these two worlds seamlessly.

целта беше да се свържат тези два свята безпроблемно.

Among all these experiments,

Сред всички тези експерименти,

there was one thing in common:

имаше нещо общо:

I was trying to bring a part of the physical world

Опитвах се да внеса част от физическия свят в дигиталния свят.

to the digital world.

Вземах някаква част от предметите,

I was taking some part of the objects,

or any of the intuitiveness of real life,

или нещо от интуитивността на реалния живот,

and bringing them to the digital world,

и ги вкарвах в дигиталния свят,

because the goal was to make our computing interfaces more intuitive.

защото целта беше да направим нашите компютърни интерфейси по-интуитивни.

But then I realized that we humans are not actually interested in computing.

Но после разбрах, че ние хората

в действителност не се интересуваме от компютърни технологии.

What we are interested in is information.

Това от което се интересуваме е информация.

We want to know about things.

Ние искаме да знаем за нещата.

We want to know about dynamic things going around.

Искаме да знаем за динамичните неща, които се случват около нас.

So I thought, around last year -- in the beginning of the last year --

Така си помислих, някъде през миналата година - в началото на миналата година --

I started thinking, "Why can I not take this approach in the reverse way?"

започнах да си мисля: "Защо да не мога да предприема този подход по обратен начин?"

Може би, "Защо да не взема моя дигитален свят

Maybe, "How about I take my digital world

and paint the physical world with that digital information?"

и да оцветя физическия свят с тази дигитална информация? "

Защото пикселите са всъщност, точно сега, ограничени в тези правоъгълни устройства,

Because pixels are actually, right now, confined in these rectangular devices

които се побират в джобовете ни.

that fit in our pockets.

Why can I not remove this confine

Защо да не мога да премахна това ограничение

and take that to my everyday objects, everyday life

и да прехвърля това в предметите от бита, ежедневието,

so that I don't need to learn the new language

така че да не трябва да научавам нов език

for interacting with those pixels?

за взаимодействие с тези пиксели?

So, in order to realize this dream,

Така, за да осъществя тази мечта,

I actually thought of putting a big-size projector on my head.

всъщност измислих да поставя един голям проектор на главата ми.

I think that's why this is called a head-mounted projector, isn't it?

Мисля, че заради това, това се нарича проектор, монтиран върху главата, нали?

I took it very literally,

Взех го много буквално,

and took my bike helmet,

и взех моята велосипедна каска,

put a little cut over there so that the projector actually fits nicely.

направих малък изрез там, така че проектора действително пасва добре.

So now, what I can do --

Така че сега, какво мога да направя --

I can augment the world around me with this digital information.

мога да подсиля света около мен с тази цифрова информация.

But later,

Но по-късно,

I realized that I actually wanted to interact

осъзнах, че искам също и да си взаимодействам с тези дигитални пиксели.

with those digital pixels, also.

So I put a small camera over there that acts as a digital eye.

Така че сложих малка камера там,

която действа като цифрово око.

Later, we moved to a much better,

По-късно се прехвърлихме към много по-добра,

consumer-oriented pendant version of that,

ориентирана към потребителите висяща версия на това,

that many of you now know as the SixthSense device.

която много от вас вече знаят като устройството "Шесто чувство."

But the most interesting thing about this particular technology

Но най-интересното нещо за тази конкретнa технология е,

is that you can carry your digital world with you

че можете да носите вашия дигитален свят с вас,

wherever you go.

където и да отидете.

You can start using any surface, any wall around you,

Можете да започнете да използвате всякаква повърхност,

as an interface.

всяка стена около вас, като интерфейс.

The camera is actually tracking all your gestures.

Камерата в действителност проследява всичките ви жестове.

Whatever you're doing with your hands,

Каквото и да правите с ръцете си,

it's understanding that gesture.

тя разбира този жест.

And, actually, if you see, there are some color markers

И, действително, както виждате, има някои цветови маркери,

that in the beginning version we are using with it.

които използваме в началната версия с нея.

You can start painting on any wall.

Можете да започнете да рисувате на всяка стена.

You stop by a wall, and start painting on that wall.

Спирате се до стена, и да започвате да рисувате на стената.

But we are not only tracking one finger, here.

Но ние не следим само един пръст, тук.

We are giving you the freedom of using all of both of your hands,

Ние ви даваме свободата да използвате всичките и на двете си ръце,

so you can actually use both of your hands to zoom into or zoom out

така че можете да ползвате и двете си ръце, за да увеличавате или намалявате

of a map just by pinching all present.

върху картата, само със защипване на всичко налично.

The camera is actually doing -- just, getting all the images --

Камерата всъщност прави --

просто, получава всички изображения --

is doing the edge recognition and also the color recognition

тя прави разпознаването на краищата и на цветовете,

and so many other small algorithms are going on inside.

и толкова много други малки алгоритми се случват вътре.

So, technically, it's a little bit complex,

Така че, технически погледнато, това е малко сложно,

but it gives you an output which is more intuitive to use, in some sense.

но ви дава резултат, който е по-интуитивен за използване, в известен смисъл.

But I'm more excited that you can actually take it outside.

Но съм по-развълнувани, че всъщност можете да го вземете навън.

Rather than getting your camera out of your pocket,

Вместо да извадите фотоапарата от джоба си,

you can just do the gesture of taking a photo,

може просто да направите жест, като за правене на снимка

and it takes a photo for you.

и устройстовото прави снимка.

(Applause)

(Ръкопляскания)

Thank you.

Благодаря ви.

And later I can find a wall, anywhere,

И по-късно мога да намеря стена, навсякъде,

and start browsing those photos

и да започна да преглеждам тези снимки,

or maybe, "OK, I want to modify this photo a little bit

или може би, "Добре, искам да промени тази снимка малко

and send it as an email to a friend."

и да я изпратя по имейл на приятел. "

So, we are looking for an era

Така че, ние очакваме епоха, в която

where computing will actually merge with the physical world.

компютърния свят всъщност ще се слее с физическия свят.

And, of course, if you don't have any surface,

И, разбира се, ако нямате никаква повърхност,

you can start using your palm for simple operations.

можете да започнете да използвате дланта си за прости операции.

Here, I'm dialing a phone number just using my hand.

Тук аз набирам телефонен номер като използвам само ръката си.

The camera is actually not only understanding your hand movements,

Камерата всъщност не само разбира движенията на ръката ви,

but, interestingly,

но, още по-интересно,

is also able to understand what objects you are holding in your hand.

също е в състояние да разбере какви обекти държите в ръката си.

Това, което правим тук е всъщност --

For example, in this case,

например, в този случай,

the book cover is matched

корицата на книгата е сравнена

with so many thousands, or maybe millions of books online,

с толкова много хиляди, или може би милиони книги онлайн

and checking out which book it is.

и проверяваме коя книга е това.

Once it has that information,

Веднъж щом има тази информация,

it finds out more reviews about that,

намира повече рецензии за книгата,

or maybe New York Times has a sound overview on that,

или може би Ню Йорк Таймс има звуков преглед на нея,

so you can actually hear, on a physical book,

така че всъщност можете да чуете, на физическа книга,

a review as sound.

рецензията като звук.

(Video) Famous talk at Harvard University --

( "известен разговор в Харвардския университет ...")

This was Obama's visit last week to MIT.

Това е посещение на Обама миналата седмица в Масачузетския технологичен институт (МТИ).

(Video) And particularly I want to thank two outstanding MIT --

("... и по-специално искам да благодаря на двама изключителни МТИ ...")

Pranav Mistry: So, I was seeing the live [video] of his talk,

Така че, аз гледах на живо [видео] разговора му, отвън, само на един вестник.

outside, on just a newspaper.

Your newspaper will show you live weather information

Вашият вестник ще ви покзва информация на живо за времето,

rather than having it updated.

вместо да го актуализира - както когато трябва да проверите компютъра си

You have to check your computer in order to do that, right?

за да направите това, нали?

(Applause)

(Ръкопляскания)

When I'm going back, I can just use my boarding pass

Когато се връщам обратно, просто мога да използвам бордната си карта,

to check how much my flight has been delayed,

за да проверя колко е закъснял полета ми,

because at that particular time,

защото по това време,

I'm not feeling like opening my iPhone,

не ми се иска да отварям моя iPhone,

and checking out a particular icon.

и да проверявам определена икона.

And I think this technology will not only change the way --

И мисля, че тази технология не само ще промени начина, по --

(Laughter)

Да. (Смях)

Yes.

It will change the way we interact with people, also,

Ще промени и начина, по който си взаимодействаме също така и с хора,

not only the physical world.

не само с физическия свят.

The fun part is, I'm going to the Boston metro,

Най-забавната част е, тук съм в бостънското метро,

and playing a pong game inside the train on the ground, right?

и играя Понг във влака

на земята, нали?

(Laughter)

(Смях)

And I think the imagination is the only limit

И мисля, че въображението е единственото ограничение

of what you can think of

на това, което можете да се сетите,

when this kind of technology merges with real life.

когато този вид технология се слее с реалния живот.

But many of you argue, actually,

Но много от вас твърдят, всъщност, че

that all of our work is not only about physical objects.

цялата наша работа не е само с физически предмети.

We actually do lots of accounting and paper editing

Ние всъщност извършваме много счетоводни и хартиени редактирания,

and all those kinds of things; what about that?

и всички тези различни неща, какво да кажем за това?

And many of you are excited about the next-generation tablet computers

Много от вас се вълнуват от следващото поколение таблетни компютри,

to come out in the market.

които ще излязат на пазара.

So, rather than waiting for that,

Така че, вместо да чакам за това,

I actually made my own, just using a piece of paper.

всъщност направих мой собствен, само с помощта на парче хартия.

So, what I did here is remove the camera --

Това, което направих тук бе да премахна камерата --

All the webcam cameras have a microphone inside the camera.

Всички уеб камери имат микрофон в камерата.

I removed the microphone from that,

отстраних микрофона от нея,

and then just pinched that --

и след това просто притиснах това --

like I just made a clip out of the microphone --

както току-що направих кламер от микрофона --

and clipped that to a piece of paper, any paper that you found around.

и защипах това на парче хартия, всяка хартия, която ви попадне под ръка.

So now the sound of the touch

Така че сега звука на докосване

is getting me when exactly I'm touching the paper.

ме достига, точно когато докосвам хартията.

But the camera is actually tracking where my fingers are moving.

Но камерата в действителност проследява, когато пръстите ми са в движение.

You can of course watch movies.

Разбира се, че можете да гледате филми

(Video) Good afternoon. My name is Russell,

( "Добър ден. Казвам се Ръсел ...")

and I am a Wilderness Explorer in Tribe 54."

("... и аз съм Пустинен Изследовател в Племе 54. ")

PM: And you can of course play games.

И разбира се, можете да играете на игри.

(Car engine)

(Двигател на кола)

Here, the camera is actually understanding how you're holding the paper

Тук, камерата всъщност разбира как държите хартията

and playing a car-racing game.

и играете играта със състезателни коли.

(Applause)

(Ръкопляскания)

Many of you already must have thought, OK, you can browse.

Много от вас вече сигурно си мислят, добре, можете ли да браузвате.

Да. Разбира се можете да разглеждате всяка интернет страница,

Yeah. Of course you can browse to any websites

or you can do all sorts of computing on a piece of paper

или можете да правите всички неща като на компютър, върху лист хартия,

wherever you need it.

когато имате нужда от тях.

So, more interestingly,

Така че, по-интересно,

I'm interested in how we can take that in a more dynamic way.

Аз се интересувам от това как можем да направим това по по-динамичен начин.

When I come back to my desk, I can just pinch that information

Когато се върна на бюрото ми, мога само да защипя тази информацията

back to my desktop

обратно към компютъра си,

so I can use my full-size computer.

за да мога да използвам моя компютър в пълен размер.

(Applause)

(Ръкопляскания)

And why only computers? We can just play with papers.

И защо само компютри? Ние можем също да си играем и с документи.

Paper world is interesting to play with.

Хартиеният свят е интересен за игра.

Here, I'm taking a part of a document,

Тук, аз вземам част от документа

and putting over here a second part from a second place,

и пускам тук втора част от второ място --

and I'm actually modifying the information that I have over there.

и всъщност изменям информацията,

която имам тук.

Yeah. And I say, "OK, this looks nice, let me print it out, that thing."

Да. И казвам, "Добре, това изглежда хубаво,

нека да го разпечатам, това нещо. "

So I now have a print-out of that thing.

Така че сега имам разпечатка на това нещо, и сега --

So the workflow is more intuitive,

Работният процес е по-интуитивен в начина, по който го правехме

the way we used to do it maybe 20 years back,

може би 20 години назад,

rather than now switching between these two worlds.

отколкото сега превключвайки между тези два свята.

So, as a last thought,

Така, като последна мисъл,

I think that integrating information to everyday objects

мисля, че интегрирането на информация в ежедневните предмети

не само ще ни помогне да се отървем от дигиталната пропаст,

will not only help us to get rid of the digital divide,

the gap between these two worlds,

разликата между тези два свята,

but will also help us, in some way,

но също така ще ни помогне по някакъв начин,

to stay human,

да останем хуманни,

to be more connected to our physical world.

да бъдем по-свързани с нашия физически свят.

And it will actually help us not end up being machines

И това ще ни помогне, всъщност, да не бъдем машини,

sitting in front of other machines.

седящи пред други машини.

That's all. Thank you.

Това е всичко. Благодаря ви.

(Applause)

(Ръкопляскания)

Thank you.

Благодаря ви.

(Applause)

(Ръкопляскания)

Chris Anderson: So, Pranav, first of all, you're a genius.

Крис Андерсън: И така, Пранав,

на първо място, ти си гений.

This is incredible, really.

Това е невероятно, наистина.

What are you doing with this? Is there a company being planned?

Какво ще правиш с това? Има ли фирма, която се планира?

Or is this research forever, or what?

Или това е безкрайно изследване, или какво?

Pranav Mistry: So, there are lots of companies,

Пранав Мистри: Значи, има много фирми --

sponsor companies of Media Lab interested in taking this ahead

всъщност фирмите-спонсори на Медия лаб --

които се интересуват да развият това в една или друга насока.

in one or another way.

Companies like mobile-phone operators

Компании като мобилни оператори

want to take this in a different way than the NGOs in India,

искат да развият това по различен начин, в сравнение с неправителствените организации в Индия,

thinking, "Why can we only have 'Sixth Sense'?

[които] са мислят, "Защо да имаме само 'Шесто чувство'?

We should have a 'Fifth Sense' for missing-sense people who cannot speak.

Трябва да имаме и 'Пето чувство' за хората с липсващо чувство,

които не могат да говорят.

This technology can be used for them to speak out in a different way

Тази технология може да се използва за тях, за говорят по различен начин,

maybe a speaker system."

може би с високоговорители."

CA: What are your own plans? Are you staying at MIT,

КА: Какви са твоите собствени планове? Оставаш ли в МТИ,

or are you going to do something with this?

или ще правиш нещо с това?

ПМ: Аз се опитвам да направя това по-достъпно за хората,

PM: I'm trying to make this more available to people

така че всеки да може да разработи собствено устройство "Шесто чувство",

so that anyone can develop their own SixthSense device,

защото хардуера всъщност не е толкова труден за производство,

because the hardware is actually not that hard to manufacture

or hard to make your own.

или не е трудно да направите свой собствен.

We will provide all the open source software for them,

Ние ще предоставим целия софтуер с отворен код за тях,

maybe starting next month.

може би от следващия месец.

CA: Open source? Wow.

КА: Отворен код? Уау.

(Applause)

(Ръкопляскания)

CA: Are you going to come back to India with some of this, at some point?

КА: Ще се върнеш ли в Индия, с нещо от това, в един момент?

PM: Yeah. Yes, yes, of course.

ПМ: Да. Да, да, разбира се.

CA: What are your plans? MIT? India?

КА: Какви са твоите планове? МТИ?

How are you going to split your time going forward?

Индия? Как ще си разделиш времето си в бъдеще?

PM: There is a lot of energy here. Lots of learning.

ПМ: Има много енергия тук. Много живот.

All of this work that you have seen is all about my learning in India.

Цялата тази работа, която видяхте, е плод на

обучението ми в Индия.

And now, if you see, it's more about the cost-effectiveness:

И сега, ако видите още за ефективността на разходите:

this system costs you $300

тази система ще ви струва 300 долара

compared to the $20,000 surface tables, or anything like that.

в сравнение с 20 000 долара за масата "Surface" ("Повърхност"), или нещо подобно.

Or maybe even the $2 mouse gesture system at that time was costing around $5,000?

Или може би дори системата за жестове от двудоларова мишка,

по това време струваше около 5000 долара?

I showed that, at a conference, to President Abdul Kalam, at that time,

Така че, ние действително - показах това, по време на конференция,

на президент Абдул Калам, по това време,

and then he said, "OK, we should use this in Bhabha Atomic Research Centre

и тогава той каза: "Добре, ние трябва да използваме това в Центъра за ядрени изследвания в Баба,

for some use of that."

за някои изгледи за това. "

So I'm excited about how I can bring the technology to the masses

Така че аз се вълнувам от това, как да доставя технологията на хората,

rather than just keeping that technology in the lab environment.

а не просто да поддържам тази технология в лабораторна среда.

(Applause)

(Ръкопляскания)

CA: Based on the people we've seen at TED,

КА: Въз основа на хората, които съм видял в TED,

I would say you're truly one of the two or three

бих казал, че си наистина един от двамата или трима

best inventors in the world right now.

най-добри изобретатели в света в момента.

It's an honor to have you at TED.

Чест е да те имаме в TED.

Thank you so much.

Благодаря ти много.

That's fantastic.

Беше фантастично.

(Applause)

(Ръкопляскания)