Unveiling the genius of multi-touch interface design | Jeff Han

Translator: Anton Hikov Reviewer: MaYoMo com

I'm really excited to be here today.

Наистина се вълнувам да съм тук днес,

I'll show you some stuff that's just ready to come out of the lab,

понеже ще ви покажа някои неща, които са готови да излязат от лабораторията,

literally, and I'm really glad that you guys

буквално, и наистина се радвам, че вие хора, ще бъдете сред първите, които ще могат да ги видят

are going to be among the first to see it in person,

наживо, понеже в действителност, наистина мисля. че това ще промени

because I really think this is going to really change

-- наистина промени -- начинът, по който взаимодействаме с машините от сега нататък.

the way we interact with machines from this point on.

Now, this is a rear-projected drafting table.

Сега, това е осветена отдолу чертожна маса. Тя е широка около 36 инча (91 см)

It's about 36 inches wide

and it's equipped with a multi-touch sensor.

и е оборудвана със сензори, отчитащи многократни докосвания. Нормалните сензори, отчитащи докосвания,

Normal touch sensors that you see,

които може да видите по будки или интерактивни бели дъски,

like on a kiosk or interactive whiteboards,

can only register one point of contact at a time.

могат да регистрират само една точка на контакт във времето.

This thing allows you to have multiple points at the same time.

Това нещо ви позволява да имате множество точки едновременно.

They can use both my hands; I can use chording actions;

Те могат да използват и двете ми ръце, мога да използвам дъговидни движения,

I can just go right up and use all 10 fingers if I wanted to.

и мога просто да отида право нагоре и използвам всичките си 10 пръста,

You know, like that.

ако искам. Просто ей така.

Now, multi-touch sensing isn't completely new.

Сензорите, позволяващи множество докосвания не са нещо съвсем ново.

People like Bill Buxton have been playing around with it in the '80s.

Искам да кажа, че хора като Бил Бъкстън си играеха с това през 90-те години.

However, the approach I built here is actually high-resolution,

Обаче, подходът, който построих тук е всъщност с висока разделителна способност,

low-cost, and probably most importantly, very scalable.

ниска цена и вероятно най-важното е, че е широко мащабируем.

So, the technology, you know,

Така че технологията, знаете ли, не е най-вълнуващото нещо тук в момента,

isn't the most exciting thing here right now,

other than probably its newfound accessibility.

освен може би, новооткритата ѝ достъпност.

What's really interesting here is what you can do with it

Това, което е наистина интересно тук е, какво може да правите с нея

and the kind of interfaces you can build on top of it.

и различните интерфейси, които могат да се построят с нея. Нека да видим.

So let's see.

So, for instance, we have a lava lamp application here.

Така, например, имаме приложение с лава-лампа. Сега, може да видите,

Now, you can see,

I can use both of my hands to kind of squeeze and put the blobs together.

мога да използвам двете си ръце, за да смачкам и обединя петната

I can inject heat into the system here,

заедно. Мога да вкарам топлина в системата тук,

or I can pull it apart with two of my fingers.

или мога да я издърпам с два от пръстите си.

It's completely intuitive; there's no instruction manual.

Напълно е интуитивна, няма нужда от инструкция за употреба.

Интерфейсът просто изчезва.

The interface just kind of disappears.

This started out as a screensaver app

Това започна като вид скрийнсейвър приложение, което един от докторантите в

that one of the Ph.D. students in our lab, Ilya Rosenberg, made.

нашата лаборатория, Иля Розенберг, направи. Но мисля, че истинската ѝ идентичност се проявява тук.

But I think its true identity comes out here.

Now what's great about a multi-touch sensor is that, you know,

Това, което е страхотно в сензор, позволяващ многократни докосвания е,

I could be doing this with as many fingers here,

че мога да правя това с колкото си искам пръсти,

but of course multi-touch also inherently means multi-user.

но разбира се, многократни докосвания неизменно означават и много потребители.

Chris could be interacting with another part of Lava,

И така, Крис може да е тук и да си взаимодейства с друга част от лавата,

while I play around with it here.

докато аз си играя с нея тук. Може да си представите нов вид пособие за правене на скулптури,

You can imagine a new kind of sculpting tool,

where I'm kind of warming something up, making it malleable,

където затоплям нещо, правя го ковко,

and then letting it cool down and solidifying in a certain state.

и после го оставям да се изстуди и да се вкамени в определено състояние.

Google should have something like this in their lobby.

Гугъл трябва да имат нещо такова в тяхното лоби. (Смях)

(Laughter)

I'll show you a little more of a concrete example here,

Ще ви покажа нещо -- малко по-конкретен пример тук, след като това нещо се зареди.

as this thing loads.

This is a photographer's light-box application.

Това е фотографско приложение "Светлинна кутия."

Again, I can use both of my hands to interact and move photos around.

Отново, мога да използвам двете си ръце за да взаимодействам и да движа снимките наоколо.

But what's even cooler is that if I have two fingers,

Но това, което е дори по-страхотно е, че ако имам два пръста,

I can actually grab a photo and then stretch it out like that really easily.

мога всъщност да сграбча снимка и да я разтегна ей-така, с лекота.

I can pan, zoom and rotate it effortlessly.

Мога да увеличавам, намалявам и да я въртя с лекота.

I can do that grossly with both of my hands,

Мога да го направя с двете ръце заедно,

or I can do it just with two fingers on each of my hands together.

или мога да го направя само с два пръста на всяка от ръцете ми заедно.

If I grab the canvas, I can do the same thing -- stretch it out.

Ако сграбча платното, мога да направя нещо подобно -- да го уголемя.

I can do it simultaneously, holding this down,

Мога да го направя едновременно, докато държа това надолу,

and gripping on another one, stretching this out.

и сграбчвам друго, разтягайки го по този начин.

Again, the interface just disappears here.

Отново, интерфейсът просто изчезва от тук.

There's no manual.

Няма ръководство. Това работи точно както очаквате,

This is exactly what you expect,

especially if you haven't interacted with a computer before.

особено, ако не сте взаимодействали с компютър преди това.

Now, when you have initiatives like the $100 laptop,

Сега, когато има инициативи като 100 доларов лаптоп,

I kind of cringe at the idea

аз съм малко скептик, че тази идея ще представи цяло ново поколение

of introducing a whole new generation to computing

от хора в компютрите с този стандартен интерфейс с мишка и прозорец.

with this standard mouse-and-windows-pointer interface.

This is something that I think is really the way

Това е нещото, което смятам, че е начинът, по който наистина трябва

we should be interacting with machines from now on.

да взаимодействаме с машините от този момент нататък. (Ръкопляскане)

(Applause)

Now, of course, I can bring up a keyboard.

Сега, разбира се, може да донеса клавиатура.

(Laughter)

And I can bring that around, put that up there.

Мога да преместя това тук, да поставя това там.

Obviously, this is a standard keyboard,

Сега, очевидно, това е нещо като стандартна клавиатура,

but of course I can rescale it to make it work well for my hands.

но разбира се, аз мога да я мащабирам, за да работи удобно за моите ръце.

That's really important, because there's no reason in this day and age

И това е наистина важно, понеже няма причина в този ден и епоха,

that we should be conforming to a physical device.

да се ограничаваме с физически устройства.

That leads to bad things, like RSI.

Това може да доведе до лоши неща, като например увреждания от пренасилване (RSI).

We have so much technology nowadays

Имаме толкова много технологии в днешно време, че тези

that these interfaces should start conforming to us.

интерфейси трябва да започнат да се съобразяват с нас.

There's so little applied now to actually improving

Има толково малко неща в приложение, сега, които в действителност да подобряват

the way we interact with interfaces from this point on.

начина по който взаимодействаме с интерфейсите от този момент нататък.

This keyboard is probably actually the really wrong direction to go.

Тази клавиатура е вероятно наистина погрешната посока, която може да поемем.

You can imagine, in the future, as we develop this kind of technology,

Може да си представите, в бъдеще, докато развиваме този вид технология,

a keyboard that kind of automatically drifts as your hand moves away,

клавиатура, която се прибира, когато ръката ви се отдръпва

and really intelligently anticipates which key you're trying to stroke.

и наистина очаква по интелигентен начин, кой клавиш се опитвате да натиснете с вашите ръце.

So -- again, isn't this great?

И така -- отново, не е ли това страхотно?

(Laughter)

Публиката: Къде е вашата лаборатория?

Audience: Where's your lab?

Jeff Han: I'm a research scientist at NYU in New York.

Джеф Хан: Аз със учен-изследовател от Ню Йоркския университет (NYU).

Here's an example of another kind of app. I can make these little fuzz balls.

Ето пример за друг вид приложение. Мога да направя тези малки топки мъх.

It'll remember the strokes I'm making.

Ще запомни ударите, които правя. Разбира се мога да го направя с двете си ръце.

Of course I can do it with all my hands.

It's pressure-sensitive.

Това е чувствително на натиск, можете да забележите.

What's neat about that is,

Но което е хубаво на това, отново, аз ви показах двупръстовия жест, който ви позволява

I showed that two-finger gesture that zooms in really quickly.

да увеличавате наистина бързо. Понеже не трябва да превключвате към инструмент с ръка,

Because you don't have to switch to a hand tool

or the magnifying glass tool,

или инструмент с лупа,

може просто непрекъснато да правите неща в реален мащаб, всички едновременно.

you can just continuously make things

in real multiple scales, all at the same time.

I can create big things out here,

Мога да създам големи неща, но мога да се върна обратно и наистина бързо да се върна,

but I can go back and really quickly go back

to where I started, and make even smaller things here.

откъдето започнах и да направя дори по-малки неща тук.

This is going to be really important

Това ще е наистина важно, като стигнем до неща като

as we start getting to things like data visualization.

визуализиране на данни. Например, мисля, че всички ние харесахме разговора на Ханс Рослинг,

For instance, I think we all enjoyed Hans Rosling's talk,

and he really emphasized the fact I've been thinking about for a long time:

и той наистина подчерта факта, за който и аз си мисля от дълго време:

We have all this great data,

всички имаме тези страхотни данни, но по някаква причина, те просто си стоят там.

but for some reason, it's just sitting there.

We're not accessing it.

Ние наистина не ги ползваме. И една от причините, поради които смятам, че е така, е защото

And one of the reasons why I think that is

will be helped by things like graphics and visualization and inference tools,

-- ние ще бъде подпомогнати от неща като графични и визуализиращи, и инструменти за разбор.

but I also think a big part of it

Но също мисля, че голяма част от това ще бъде, че ще започнем да имаме по-добри интерфейси,

is going to be having better interfaces,

to be able to drill down into this kind of data,

ще можем да започнем да дълбаем в този тип данни, докато си мислим за голямата картина.

while still thinking about the big picture here.

Let me show you another app here. This is called WorldWind.

Нека ви покажа едно друго приложение. Това е нещо наречено "Световен Вятър."

It's done by NASA.

Направено е от НАСА. Нещо подобно на -- всички сме виждали Google Earth,

We've all seen Google Earth;

this is an open-source version of that.

това е версия с отворен код на нея. Има различни плъгини, които позволяват

There are plug-ins to be able to load in different data sets

да се зареждат различен набор с данни, които НАСА са събирали през годините.

that NASA's collected over the years.

As you can see, I can use the same two-fingered gestures

Но както можете да видите, мога да използвам същите двупръстови жестове,

за да вървя нагоре и надолу безпроблемно. Отново няма интерфейс.

to go down and go in really seamlessly.

There's no interface, again.

It really allows anybody to kind of go in --

Наистина позволява на всеки да се потопи -- и, просто прави това, което очаквате,

and it just does what you'd expect, you know?

знаете ли? Отново, няма интерфейс тук. Интерфейсът просто изчезва.

Again, there's just no interface here. The interface just disappears.

I can switch to different data views.

Мога да превключа на различни изгледи на данните. Това е хубавото на това приложение тук.

That's what's neat about this app here.

NASA's really cool.

Ето ви го. НАСА е наистина готина. Те имат тези хипер-спектрални снимки,

These hyper-spectral images are false-colored so you can --

които са оцветени с лъжливи цветове, така че можете -- това е наистина добро за определяне на растителната употреба. Нека се върнем обратно на това.

it's really good for determining vegetative use.

Well, let's go back to this.

Сега, страхотното нещо на картографските приложения --

The great thing about mapping applications --

те не са наистина двуизмерни, те са нещо като триизмерни. Така, отново, с интерфейс с множество точки на допир

it's not really 2D, it's 3D.

So, again, with a multi-point interface, you can do a gesture like this --

може да правите такива жестове -- така че може да се въртите така,

so you can be able to tilt around like that --

(Surprised laughter)

знаете ли. Това не е просто представено като двуизмерно увеличаване и движение.

It's not just simply relegated to a kind of 2D panning and motion.

This gesture is just putting two fingers down --

Сега, това движение, което разработихме, отново, е просто поставяне на два пръста долу,

it's defining an axis of tilt -- and I can tilt up and down that way.

това е дефиниране на ос на наклон, и мога да се накланям надолу или нагоре по този начин.

We just came up with that on the spot,

Това е нещо, което ни хрумна на място,

it's probably not the right thing to do,

вероятно не е правилното нещо за правене,

but there's such interesting things you can do with this interface.

но има толкова интересни неща, които може да се правят с този вид интерфейс.

It's just so much fun playing around with it, too.

И е също толково забавно да си играете с него. (Смях)

(Laughter)

And so the last thing I want to show you is --

И така, последното нещо. което искам да ви покажа е --

I'm sure we can all think of a lot of entertainment apps

сигурен съм, че може да се сетите за много приложения за

that you can do with this thing.

забавление, които може да се правят с това нещо.

I'm more interested in the creative applications we can do with this.

Малко повече ме интересуват различните творчески приложения, които могат да се правят с това.

Now, here's a simple application here -- I can draw out a curve.

Сега, ето просто приложение -- мога да начертая крива.

And when I close it, it becomes a character.

И когато я затворя, тя става символ.

But the neat thing about it is I can add control points.

Но хубавото нещо е, че мога да добавя контролни точки.

And then what I can do is manipulate them with both of my fingers at the same time.

И после това, което мога да направя е да ги манипулирам с двата си пръста едновременно.

And you notice what it does.

И може да забележите какво прави.

It's kind of a puppeteering thing,

Това е нещо като в кукловодството, където мога да използвам,

where I can use as many fingers as I have to draw and make --

колкото имам пръсти за да рисувам и творя --

Now, there's a lot of actual math going on under here

Всъщност има много математика под повърхноста,

for this to control this mesh and do the right thing.

използвана за да се контролира тази мрежа и да се прави правилното нещо.

This technique of being able to manipulate a mesh here, with multiple control points,

Искам да кажа, тази технология, използвана за манипулиране на мрежата тук

с множество контролни точки, е в действителност нещо, което е на гребена на науката.

is actually state of the art.

It was released at SIGGRAPH last year.

Беше пуснато от Siggraph миналата година,

It's a great example of the kind of research I really love:

но е чудесен пример за вида изследвания, които наистина обичам.

Цялата тази изчислителна мощ се прилага за да се накарат неща да вършат правилните неща,

all this compute power to make things do the right things,

intuitive things, to do exactly what you expect.

интуитивни неща. Да правят това, което очаквате.

So, multi-touch interaction research is a very active field right now in HCI.

И така, изследванията на взаимодействия с много точки на допир, е много активна сфера в областта на взаимодействието между хора и компютри (HCI):

I'm not the only one doing it, a lot of other people are getting into it.

Не съм единственият, който прави това, има още много хора, които навлизат в това.

This kind of technology is going to let even more people get into it,

Този вид технология ще позволи дори на още повече хора да навлязат в тази дисциплина,

I'm looking forward to interacting with all of you over the next few days

и аз наистина очаквам с нетърпение да си взаимодействам с всички вас

през следващите няколко дни, и да видя как това може да се приложи във вашите съответни области.

and seeing how it can apply to your respective fields.

Благодаря ви.

Thank you.

(Ръкопляскане)

(Applause)