Jinha Lee: Reach into the computer and grab a pixel

Перекладач: Khrystyna Romashko Утверджено: Hanna Leliv

Throughout the history of computers

Упродовж всієї історії комп'ютерів

we've been striving to shorten the gap between us

ми прагнули зменшити розрив між нами

and digital information,

та цифровою інформацією,

the gap between our physical world

розрив між нашим фізичним світом

and the world in the screen

та світом в моніторі,

where our imagination can go wild.

де наша уява шаленіє.

And this gap has become shorter,

І цей розрив став меншим,

shorter, and even shorter,

меншим, і ще меншим,

and now this gap is shortened down

і зараз цей розрив зменшено настільки,

to less than a millimeter,

що він став менше міліметра,

the thickness of a touch-screen glass,

це товщина скла сенсорного екрану,

and the power of computing

і сила інформаційних технологій

has become accessible to everyone.

стала доступною кожному.

But I wondered, what if there could be no boundary at all?

Але мені було цікаво, а якби тих меж не було взагалі?

I started to imagine what this would look like.

Я почав уявляти, як би це виглядало.

First, I created this tool

Спершу я створив прилад,

which penetrates into the digital space,

який входить у цифровий простір,

so when you press it hard on the screen,

коли ви з силою натискаєте ним на екран,

it transfers its physical body into pixels.

він переводить своє фізичне тіло у пікселі.

Designers can materialize their ideas

Дизайнери можуть втілювати свої ідеї

directly in 3D,

безпосередньо у 3D,

and surgeons can practice on virtual organs

а хірурги можуть тренуватися на віртуальних органах

underneath the screen.

під екраном.

So with this tool, this boundary has been broken.

Тож з цим приладом ця межа була усунута.

But our two hands still remain outside the screen.

Але наші дві руки досі залишаються за межами екрану.

How can you reach inside and interact

Як можна сягнути всередину та вплинути

with the digital information

на цифрову інформацію

using the full dexterity of our hands?

за допомогою всієї спритності наших рук?

At Microsoft Applied Sciences,

В Microsoft Applied Sciences

along with my mentor Cati Boulanger,

разом з моїм вчителем Кейті Буланже,

I redesigned the computer

я переробив комп'ютер,

and turned a little space above the keyboard

перетворивши невеликий простір над клавіатурою

into a digital workspace.

на цифрове робоче середовище.

By combining a transparent display and depth cameras

Я поєднав прозорий дисплей та камери, що розрізняють глибину,

for sensing your fingers and face,

щоб зчитувати рухи пальців та обличчя.

now you can lift up your hands from the keyboard

Це дало змогу відірвати руки від клавіатури,

and reach inside this 3D space

простягнути їх у тривимірний простір

and grab pixels with your bare hands.

та голими руками доторкнутися до пікселів.

(Applause)

(Оплески)

Because windows and files have a position in the real space,

Оскільки вікна та файли мають своє розташування у реальному просторі,

selecting them is as easy as grabbing a book off your shelf.

вибирати їх так же легко, як взяти книгу з полиці.

Then you can flip through this book

Тоді можна погортати цю книгу,

while highlighting the lines, words

водночас виділяючи рядки чи слова

on the virtual touch pad below each floating window.

на віртуальному тачпаді під кожним вікном.

Architects can stretch or rotate the models

Архітектори можуть розтягувати чи обертати моделі

with their two hands directly.

безпосередньо своїми двома руками.

So in these examples,

Тож у цих прикладах

we are reaching into the digital world.

ми простягнули руки у цифровий світ.

But how about reversing its role

А якщо можна було б поміняти ці ролі

and having the digital information reach us instead?

й натомість дозволити цифровій інформації сягнути нас?

I'm sure many of us have had the experience

Я впевнений, що кожному з нас доводилося

of buying and returning items online.

купувати та повертати товари онлайн.

But now you don't have to worry about it.

Але тепер мені не треба цим перейматися.

What I got here is an online augmented fitting room.

Ось тут ви бачите онлайн примірочну кабіну в доповненій реальності.

This is a view that you get from

Це вигляд, отриманий із

head-mounted or see-through display

сенсорного або прозорого дисплею,

when the system understands the geometry of your body.

коли система розуміє геометрію вашого тіла.

Taking this idea further, I started to think,

Розвиваючи цю ідею далі, я став думати,

instead of just seeing these pixels in our space,

замість того, щоб просто дивитись на ці пікселі у нашому просторі,

how can we make it physical

як можна зробити їх фізичними,

so that we can touch and feel it?

щоб могти їх торкнутись та відчути.

What would such a future look like?

Як би мало виглядати таке майбутнє?

At MIT Media Lab, along with my advisor Hiroshi Ishii

У MIT Media Lab разом з моїм куратором Хіроші Ішіі

and my collaborator Rehmi Post,

та моїм колегою Ремі Постом

we created this one physical pixel.

ми створили цей фізичний піксель.

Well, in this case, this spherical magnet

У цьому випадку цей сферичний магніт

acts like a 3D pixel in our space,

діє, як 3D піксель в нашому просторі,

which means that both computers and people

що означає, що і комп'ютери, і люди

can move this object to anywhere

можуть переміщати цей об'єкт будь-куди

within this little 3D space.

в межах цього невеличкого 3D простору.

What we did was essentially canceling gravity

Ми, власне, нейтралізували гравітацію

and controlling the movement by combining

та контролювали рух, поєднуючи

magnetic levitation and mechanical actuation

магнітну левітацію та механічну дію

and sensing technologies.

з сенсорними технологіями.

And by digitally programming the object,

Запрограмувавши цей об'єкт у цифровій формі,

we are liberating the object from constraints

ми звільняємо об'єкт від обмежень

of time and space, which means that now,

часу та простору, що означає, що тепер

human motions can be recorded and played back

людські рухи можуть бути записані та відтворені,

and left permanently in the physical world.

і можуть залишатися постійно у фізичному світі.

So choreography can be taught physically over distance

Тож можна фізично навчати хореографії на відстані,

and Michael Jordan's famous shooting can be replicated

а славетний кидок Майкла Джордана можна відтворювати

over and over as a physical reality.

знову і знову у фізичній реальності.

Students can use this as a tool

Студенти можуть використовувати це як інструмент

to learn about the complex concepts

для вивчення складних концептів

such as planetary motion, physics,

таких як рух планет, фізика,

and unlike computer screens or textbooks,

і, на відміну від комп'ютерних екранів чи посібників,

this is a real, tangible experience

це реальний досвід, який можна осягнути,

that you can touch and feel, and it's very powerful.

можна торкнутися, відчути. Він дуже потужний.

And what's more exciting

Ще захопливіше те,

than just turning what's currently in the computer physical

що просто повернувши те, що зараз є фізичним, у комп'ютер,

is to start imagining how programming the world

можна уявити, як програмування світу

will alter even our daily physical activities.

вплине навіть на нашу фізичну діяльність.

(Laughter)

(Сміх)

As you can see, the digital information

Як ви бачите, цифрова інформація

will not just show us something

не тільки покаже нам щось,

but it will start directly acting upon us

але й стане безпосередньо на нас впливати,

as a part of our physical surroundings

як частина нашого фізичного середовища,

without disconnecting ourselves from our world.

не пориваючи зв'язку зі світом.

Today, we started by talking about the boundary,

Сьогодні ми розпочали розмову про межі,

but if we remove this boundary,

але якщо ми заберемо цю межу,

the only boundary left is our imagination.

єдиною межею, що залишиться, буде наша уява.

Thank you.

Дякую.

(Applause)

(Оплески)