Blaise Aguera y Arcas: Jaw-dropping Photosynth demo

Блез Агуэра-и-Аркас: Как Photosynth связывает фотографии

What I'm going to show you first, as quickly as I can,

Прежде всего, как можно скорее, я хочу представить вам

is some foundational work, some new technology

одну серьезную работу, новую технологию,

that we brought to Microsoft as part of an acquisition

которую мы предоставили Microsoft как часть её приобретения

almost exactly a year ago.

почти год назад. Это Seadragon («Морской дракон»).

This is Seadragon, and it's an environment

В этом режиме можно работать

in which you can either locally or remotely interact

with vast amounts of visual data.

с огромным количеством видеоинформации, локально или удаленно.

We're looking at many, many gigabytes of digital photos here

Перед нашими глазами проходят мириады гигабайт цифровых фотографий,

and kind of seamlessly and continuously zooming in,

и мы можем незаметно и непрерывно увеличивать изображение,

panning through it, rearranging it in any way we want.

горизонтально его прокручивать, перестраивать его, как хотим.

And it doesn't matter how much information we're looking at,

Не имеет значения, сколько информации проходит у нас перед глазами,

how big these collections are or how big the images are.

насколько велики эти коллекции или сами изображения.

Most of them are ordinary digital camera photos,

Большинство из них — это снимки, сделанные обычным цифровым фотоаппаратом,

but this one, for example, is a scan from the Library of Congress,

но вот эта, например, отсканирована в Библиотеке Конгресса,

and it's in the 300 megapixel range.

она выполнена с разрешением в 300 мегапикселей.

It doesn't make any difference

Но это не имеет никакого значения,

because the only thing that ought to limit the performance of a system like this one

потому что единственное, что ограничивает эффективность

подобной системы — это количество пикселей на вашем экране

is the number of pixels on your screen at any given moment.

It's also very flexible architecture.

в данный момент. Это очень гибкая архитектура.

This is an entire book, so this is an example of non-image data.

Вот целая книга, пример данных без изображения.

This is "Bleak House" by Dickens.

Это «Холодный дом» Диккенса. Каждый столбец — это глава.

Every column is a chapter.

To prove to you that it's really text, and not an image,

Чтобы доказать вам, что это на самом деле текст, а не изображение,

we can do something like so, to really show

мы можем сделать вот что, чтобы действительно показать,

that this is a real representation of the text; it's not a picture.

что это настоящее представление текста; это не рисунок.

Maybe this is an artificial way to read an e-book.

Может быть, читать электронную книгу таким образом не совсем привычно.

I wouldn't recommend it.

Я бы не советовал читать ее так.

This is a more realistic case, an issue of The Guardian.

А это более удачный пример. Это выпуск газеты Guardian.

Every large image is the beginning of a section.

Каждое большое изображение — это начало раздела.

And this really gives you the joy and the good experience

И так вы действительно почувствуете радость и ощущение того,

of reading the real paper version of a magazine or a newspaper,

что читаете настоящую печатную версию журнала или газеты,

which is an inherently multi-scale kind of medium.

которая, по сути, является носителем информации с разными масштабами.

We've done something

Мы кое-что сделали здесь, в уголке

with the corner of this particular issue of The Guardian.

этого выпуска Guardian.

We've made up a fake ad that's very high resolution --

Мы составили фиктивную рекламу очень высокого разрешения,

much higher than in an ordinary ad --

намного выше, чем в обычной рекламе,

and we've embedded extra content.

и вставили дополнительное содержание.

If you want to see the features of this car, you can see it here.

Если вы хотите увидеть характеристики этой машины, они находятся вот здесь.

Or other models, or even technical specifications.

Или другие модели или даже техническое описание.

And this really gets at some of these ideas

Здесь мы приблизились к тому, чтобы

about really doing away with those limits on screen real estate.

покончить со всякими ограничениями реального объема экрана.

We hope that this means no more pop-ups

Мы надеемся, нам больше не понадобятся всплывающие окна

and other rubbish like that -- shouldn't be necessary.

и всякая подобная ерунда.

Of course, mapping is one of those obvious applications

Конечно, один из способов применения подобной технологии, что сразу

for a technology like this.

приходит на ум, — это составление карт.

And this one I really won't spend any time on,

Я не буду на этом останавливаться,

except to say that we have things to contribute to this field as well.

просто скажу, что мы можем кое-что привнести и в данную отрасль.

But those are all the roads in the U.S.

Это все дороги США,

superimposed on top of a NASA geospatial image.

нанесенные поверх геопространственного изображения NASA.

So let's pull up, now, something else.

А сейчас давайте остановимся на другом.

This is actually live on the Web now; you can go check it out.

Вот это сейчас размещено в сети в режиме реального времени, вы можете сами посмотреть.

This is a project called Photosynth, which marries two different technologies.

Этот проект называется Photosynth («Фотосинтез»),

он объединяет в себе две различные технологии.

One of them is Seadragon

Одна из них — это Seadragon,

and the other is some very beautiful computer-vision research

а вторая — прекрасное исследование машинного зрения,

done by Noah Snavely, a graduate student at the University of Washington,

выполненное Ноа Снейвли, аспирантом университета Вашингтона,

co-advised by Steve Seitz at U.W.

его консультировали Стив Зейтц из университета Вашингтона

and Rick Szeliski at Microsoft Research.

и Рик Силински из Microsoft Research. Просто прекрасная команда.

A very nice collaboration.

And so this is live on the Web. It's powered by Seadragon.

Этот проект размещен в сети. Поддерживается с помощью Seadragon.

You can see that when we do these sorts of views,

Вы видите, что когда мы используем эти режимы просмотра,

where we can dive through images

мы можем проникать через изображения

and have this kind of multi-resolution experience.

и получаем эффект переменной разрешающей способности.

But the spatial arrangement of the images here is actually meaningful.

Но пространственное расположение изображений имеет определенный смысл.

The computer vision algorithms have registered these images together

Алгоритмы машинного зрения зарегистрировали эти изображения

so that they correspond to the real space in which these shots --

таким образом, что они соответствуют реальному пространству —

all taken near Grassi Lakes in the Canadian Rockies --

это было снято в районе озер Грасси в канадских горах —

all these shots were taken.

где эти снимки были сделаны. Вы видите элементы

So you see elements here

of stabilized slide-show or panoramic imaging,

устойчивой покадровой или панорамной визуализации,

and these things have all been related spatially.

и всё это было связано в пространстве.

I'm not sure if I have time to show you any other environments.

Я не уверен, есть ли у меня время показать вам другие режимы просмотра.

Some are much more spatial.

Существуют режимы, которые ещё лучше передают пространство.

I would like to jump straight to one of Noah's original data-sets --

Я хотел бы перейти к одному из оригинальных наборов данных Ноа,

this is from an early prototype that we first got working this summer --

они взяты из раннего прототипа Photosynth,

с которым мы впервые начали работать летом,

to show you what I think

чтобы продемонстрировать вам то, что я считаю

is really the punch line behind the Photosynth technology,

действительно кульминационным моментом в этой технологии,

It's not necessarily so apparent

технологии Photosynth. Когда смотришь на режимы просмотра,

from looking at the environments we've put up on the website.

предложенные нами на веб-сайте, это не так заметно.

We had to worry about the lawyers and so on.

Мы тогда переживали по поводу юристов и так далее.

This is a reconstruction of Notre Dame Cathedral

Это реконструкция собора Парижской Богоматери,

that was done entirely computationally from images scraped from Flickr.

полностью выполненная с помощью компьютера на основе изображений,

собранных на сервисе Flickr. Вы просто печатаете «Нотр-Дам» во Flickr’е,

You just type Notre Dame into Flickr,

and you get some pictures of guys in T-shirts, and of the campus and so on.

и получаете изображения ребят в футболках, изображения студенческого городка

и так далее. А каждый из этих оранжевых конусов представляет изображение,

And each of these orange cones represents an image

that was discovered to belong to this model.

относящееся к этой модели.

And so these are all Flickr images,

Это все изображения из Flickr’а,

and they've all been related spatially in this way.

таким образом, они все были соединены пространственно.

We can just navigate in this very simple way.

И навигация здесь очень проста.

(Applause)

(Аплодисменты).

(Applause ends)

You know, I never thought that I'd end up working at Microsoft.

Вы знаете, я никогда не думал, что буду работать в Microsoft.

It's very gratifying to have this kind of reception here.

Такой прием — это просто огромное удовольствие для меня.

(Laughter)

(Смех)

I guess you can see this is lots of different types of cameras:

Думаю, вы видите,

все это многообразие различных видов фотоаппаратов:

it's everything from cell-phone cameras to professional SLRs,

от камеры в мобильном телефоне до профессиональных зеркальных фотоаппаратов,

quite a large number of them, stitched together in this environment.

их много, и они соединены в этом

режиме просмотра.

If I can find some of the sort of weird ones --

Если получится, я найду что-нибудь необычное.

So many of them are occluded by faces, and so on.

Многие изображения перекрываются.

Somewhere in here there is actually a series of photographs -- here we go.

Тут где-то есть серия

фотографий, а, вот они.

This is actually a poster of Notre Dame that registered correctly.

Это плакат собора Парижской Богоматери, правильно зарегистрированный.

We can dive in from the poster

Из этого плаката мы можем перейти

to a physical view of this environment.

в физический ракурс этой среды.

What the point here really is

Дело в том, что мы можем взаимодействовать с социальной средой.

is that we can do things with the social environment.

Брать данные у любого человека,

This is now taking data from everybody --

from the entire collective memory, visually, of what the Earth looks like --

из общей коллективной памяти,

чтобы видеть, как выглядит Земля,

and link all of that together.

и связывать всё это вместе.

Those photos become linked, and they make something emergent

Все эти фотографии связаны вместе,

и из них возникает нечто большее,

that's greater than the sum of the parts.

чем просто сумма составляющих.

You have a model that emerges of the entire Earth.

Вы постепенно получаете модель целой планеты.

Think of this as the long tail to Stephen Lawler's Virtual Earth work.

Считайте, что это продолжение работы Стивена Лоулера «Виртуальная Земля».

And this is something that grows in complexity as people use it,

Когда ее начинают использовать, она становится всё сложнее,

в процессе её использования

and whose benefits become greater to the users as they use it.

увеличиваются её преимущества.

Their own photos are getting tagged with meta-data that somebody else entered.

Фотографии пользователей связываются с метаданными,

которые ввел кто-то другой.

If somebody bothered to tag all of these saints

Если кто-то ввел информацию обо всех этих святых,

and say who they all are, then my photo of Notre Dame Cathedral

указал, кто они такие, тогда моя фотография собора Парижской Богоматери

suddenly gets enriched with all of that data,

внезапно обогащается всеми этими данными,

and I can use it as an entry point to dive into that space,

и я могу ее использовать как точку входа для погружения в это пространство,

into that meta-verse, using everybody else's photos,

в эту метавселенную, используя фотографии других людей

and do a kind of a cross-modal

и, таким образом, приобретя перекрестно-модальный

and cross-user social experience that way.

и перекрестно-пользовательский социальный опыт.

And of course, a by-product of all of that is immensely rich virtual models

И, конечно, побочный результат всего этого —

это виртуальные модели любой интересующей части Земли

of every interesting part of the Earth,

с чрезвычайно богатым содержанием, собранные не только

collected not just from overhead flights and from satellite images

со съемок местности и изображений со спутника

and so on, but from the collective memory.

и из всего такого прочего, но и из коллективной памяти.

Thank you so much.

Большое спасибо.

(Applause)

(Аплодисменты)

(Applause ends)

Chris Anderson: Do I understand this right?

Крис Андерсон: Я правильно понимаю? Ваше программное обеспечение позволит

What your software is going to allow,

is that at some point, really within the next few years,

когда-нибудь, уже в ближайшие несколько лет,

all the pictures that are shared by anyone across the world

по существу, связать воедино все изображения,

are going to link together?

которые кто-либо размещал в сети во всем мире?

BAA: Yes. What this is really doing is discovering,

БАА: Да. Программа их находит.

creating hyperlinks, if you will, between images.

То есть создает гиперссылки, если угодно, между изображениями.

It's doing that based on the content inside the images.

Программа делает это,

основываясь на содержимом изображений.

And that gets really exciting when you think about the richness

Это просто потрясающе, если вы подумаете о богатстве

of the semantic information a lot of images have.

семантической информации, которой обладают большинство из этих изображений.

Like when you do a web search for images,

Например, когда вы ищете изображения в сети,

you type in phrases,

вы набираете фразы, а текст на веб-странице

and the text on the web page is carrying a lot of information

содержит большое количество информации об этом изображении.

about what that picture is of.

What if that picture links to all of your pictures?

А что если это изображение связано со всеми вашими изображениями?

Тогда количество семантических взаимосвязей

The amount of semantic interconnection and richness

и весь тот объем информации, который вы получите,

that comes out of that is really huge.

становится просто огромным. Это классический сетевой эффект.

It's a classic network effect.

CA: Truly incredible. Congratulations.

КА: Блейз, это просто невероятно. Я вас поздравляю.

БАА: Огромное спасибо.