Ed Ulbrich: How Benjamin Button got his face

Эд Албрич рассказывает, как Бенджамин Баттон получил свое лицо

Переводчик: Ekaterina Lukyanova Редактор: Ahmet Yükseltürk

I'm here today representing a team of artists and technologists and filmmakers

Я сегодня представляю команду художников, технологов и кинорежиссеров,

that worked together on a remarkable film project for the last four years.

которые в течение последних четырех лет совместно работали над грандиозным проектом кино индустрии.

And along the way they created a breakthrough in computer visualization.

И одновременно сделали прорыв в области компьютерной визуализации.

So I want to show you a clip of the film now.

А сейчас я хочу показать вам клип из фильма.

Hopefully it won't stutter.

Будем надеяться, он не заест.

And if we did our jobs well, you won't know that we were even involved.

И если мы выполнили свою работу хорошо, вы не заметите, что мы вообще что-то делали.

Voice (Video): I don't know how it's possible ...

Фильм: Я не знаю, как это возможно ...

but you seem to have more hair.

но кажется, что у тебя начали расти волосы.

Brad Pitt: What if I told you that I wasn't getting older ...

Бенджамин Баттон: Что если я скажу тебе, что я не старею ...

but I was getting younger than everybody else?

но становлюсь моложе по сравнению со всеми?

I was born with some form of disease.

Я был рожден с какой-то болезнью.

Voice: What kind of disease?

Голос: Что за болезнью?

BP: I was born old.

ББ: Я родился старым.

Man: I'm sorry.

Мужчина: Я сожалею.

BP: No need to be. There's nothing wrong with old age.

ББ: Не стоит. Нет ничего плохого в старости.

Girl: Are you sick?

Девочка: Ты болен?

BP: I heard momma and Tizzy whisper,

ББ: Я слышал, мамуля и Тиззи шептались,

and they said I was gonna die soon.

и они говорили, что я должен вскоре умереть.

But ... maybe not.

Но... может быть и нет.

Girl: You're different than anybody I've ever met.

Девочка: Ты не похож ни на кого, кого я когда-либо встречала.

BB: There were many changes ...

ББ: Многое изменилось ...

some you could see, some you couldn't.

Что-то ты можешь видеть, что-то нет.

Hair started growing in all sorts of places,

Волосы начинают расти по-всюду,

along with other things.

и всякие другие вещи.

I felt pretty good, considering.

Вообщем, я чувствовал себя хорошо.

Ed Ulbrich: That was a clip from "The Curious Case of Benjamin Button."

Эд Албридж: Это был клип по фильму "Загадочная история Бенджамина Баттона".

Many of you, maybe you've seen it or you've heard of the story,

Многие из вас, хотя возможно вы видели его или слышали эту историю,

but what you might not know

вполне вероятно не знают,

is that for nearly the first hour of the film,

что почти целый первый час фильма

the main character, Benjamin Button, who's played by Brad Pitt,

главный герой, Бенджамин Баттон, которого играет Бред Питт,

is completely computer-generated from the neck up.

полностью, начиная с шеи, создан с помощью компьютера.

Now, there's no use of prosthetic makeup

И не нужно использовать сложный грим

or photography of Brad superimposed over another actor's body.

или накладывать фотографию Бреда на тело другого актера.

We've created a completely digital human head.

Мы создали полностью цифровую голову человека.

So I'd like to start with a little bit of history on the project.

А теперь давайте немного о том, как все начиналось.

This is based on an F. Scott Fitzgerald short story.

Это фильм по рассказу Ф. Скотта Фитджеральда.

It's about a man who's born old and lives his life in reverse.

Он о человеке, который рожден старым и проживает жизнь наоборот.

Now, this movie has floated around Hollywood

И идея снять этот фильм витала в Голивуде

for well over half a century,

в течение более полувека,

and we first got involved with the project in the early '90s,

и впервые мы столкнулись с проектом в начале 90-х годов

with Ron Howard as the director.

с Роном Говардом в качестве режиссера.

We took a lot of meetings and we seriously considered it.

Мы много обсуждали его, все тщательно просчитывали.

But at the time we had to throw in the towel.

Но в то время нам пришло сдаться.

It was deemed impossible.

Это было невозможно.

It was beyond the technology of the day to depict a man aging backwards.

Это было за пределами возможностей технологии того времени изобразить человека, который бы не старел, а молодел.

The human form, in particular the human head,

Человеческие формы, в особенности человеческая голова,

has been considered the Holy Grail of our industry.

считались священным Граалем для нашей индустрии.

The project came back to us about a decade later,

Где-то лет через десять проект опять попал к нам,

and this time with a director named David Fincher.

и на этот раз с Давидом Финчером в качестве режиссера.

Now, Fincher is an interesting guy.

Ну, Финчер -- интересный малый.

David is fearless of technology,

Давид не боится технологий,

and he is absolutely tenacious.

и у него просто железная хватка.

And David won't take "no."

И для Давида нету слова "нет".

And David believed, like we do in the visual effects industry,

И Давид верил, как верим и мы, представители индустрии видеоэффектов,

that anything is possible

что все возможно,

as long as you have enough time, resources and, of course, money.

если у тебя есть достаточно времени, ресурсов и, конечно, денег.

And so David had an interesting take on the film,

И у Давида было интересное представление о фильме,

and he threw a challenge at us.

он задал нам задачку.

He wanted the main character of the film to be played

Он хотел, чтобы главный персонаж фильма

from the cradle to the grave by one actor.

с колыбели до могилы был сыгран одним актером.

It happened to be this guy.

Так случилось, что им стал этот парень.

We went through a process of elimination and a process of discovery

Мы пошли с Давидом путем выдвижения идей и отметания каких-то вариантов,

with David, and we ruled out, of course, swapping actors.

и мы, конечно, отбросили идею замены актёров.

That was one idea: that we would have different actors,

Эта был один из вариантов: у нас будут разные актёры,

and we would hand off from actor to actor.

и мы будем переходить от одного к другому.

We even ruled out the idea of using makeup.

Мы даже отбросили идею использования грима.

We realized that prosthetic makeup just wouldn't hold up,

Мы осознавали, что тяжелый грим просто не прокатит,

particularly in close-up.

особенно в крупном плане.

And makeup is an additive process. You have to build the face up.

И грим -- это процесс добавления. Вам нужно построить лицо.

And David wanted to carve deeply into Brad's face

А Давид хотел проникнуть внутрь лица Бреда,

to bring the aging to this character.

чтобы состарился именно этот персонаж.

He needed to be a very sympathetic character.

Он должен был быть героем, которому очень сочувствуешь.

So we decided to cast a series of little people

Поэтому мы решили снять несколько людей небольшого роста,

that would play the different bodies of Benjamin

которые будут представлять разные тела Бенджамина

at the different increments of his life

в разные моменты его жизни,

and that we would in fact create a computer-generated version of Brad's head,

и создать компьютерную версию головы Бреда,

aged to appear as Benjamin,

состаренную, чтобы выглядеть как Бенджамин,

and attach that to the body of the real actor.

и присоединить её к телу реального актера.

Sounded great.

Звучало все здорово.

Of course, this was the Holy Grail of our industry,

Конечно, это было священным Граалем для нашей индустрии,

and the fact that this guy is a global icon didn't help either,

и сам факт, что этот парень -- мировой идол, также было не в нашу пользу,

because I'm sure if any of you ever stand in line at the grocery store,

потому что я уверен, что если вы хоть раз стояли в очереди в продовольственном магазине,

you know -- we see his face constantly.

вообщем, мы видим его лицо постоянно.

So there really was no tolerable margin of error.

И поэтому мы не имели право на ошибку.

There were two studios involved: Warner Brothers and Paramount.

Были задействованы две студии: Warner Brothers и Paramount.

And they both believed this would make an amazing film, of course,

И обе они, конечно, верили, что получится изумительный фильм,

but it was a very high-risk proposition.

но это было очень рискованное предложение.

There was lots of money and reputations at stake.

На кону было очень много денег и репутация.

But we believed that we had a very solid methodology

А мы верили, что у нас есть очень надежная методология,

that might work ...

которая, возможно, сработает ...

But despite our verbal assurances,

Но, несмотря на наши устные заверения,

they wanted some proof.

они хотели какое-либо подтверждение.

And so, in 2004, they commissioned us to do a screen test of Benjamin.

И так, в 2004 году, они поручили нам провести кинопробы Бенджамина.

And we did it in about five weeks.

Нам потребовалось на это около пяти недель.

But we used lots of cheats and shortcuts.

Но мы в большей мере смухлевали.

We basically put something together to get through the meeting.

Мы попросту что-то наскребли, чтобы провести эту встречу.

I'll roll that for you now. This was the first test for Benjamin Button.

Я прокручу это для вас. Это была первая кинопроба для Бенджамина Баттона.

And in here, you can see, that's a computer-generated head --

А вот здесь, видите, это смоделированная компьютером голова.

pretty good -- attached to the body of an actor.

Выглядит очень даже ничего. Присоединена к телу актера.

And it worked. And it gave the studio great relief.

И это сработало. И студии вздохнули с облегчением.

After many years of starts and stops on this project,

После стольких лет, в течение которых за этот проект то принимались, то вновь откладывали,

and making that tough decision,

они, наконец, решились

they finally decided to greenlight the movie.

и дали зеленый свет на съемки фильма.

And I can remember, actually, when I got the phone call to congratulate us,

Я как сейчас помню, когда мне позвонили, чтобы поздравить нас,

to say the movie was a go,

сказать, что фильм прошел,

I actually threw up.

меня чуть не вырвало.

(Laughter)

(Смех в зале)

You know, this is some tough stuff.

Ну, знаете, это вам не шуточки.

So we started to have early team meetings,

Вообщем, мы проводили начальные совещания,

and we got everybody together,

на которые собирали всех,

and it was really more like therapy in the beginning,

и в начале это было больше похоже на терапию

convincing each other and reassuring each other that we could actually undertake this.

по убеждению и заверению друг друга, что у нас все получится.

We had to hold up an hour of a movie with a character.

Нам нужно было обеспечить игру главного персонажа в течении часа.

And it's not a special effects film; it has to be a man.

И это не фильм со спецэффектами; это должен быть человек.

We really felt like we were in a -- kind of a 12-step program.

В действительности у нас было чувство, что нам надо действовать по программе 12 шагов для анонимных алкоголиков.

And of course, the first step is: admit you've got a problem. (Laughter)

И, конечно, первый шаг -- это признать, что существует проблема.

So we had a big problem:

Итак, у нас была большая проблема.

we didn't know how we were going to do this.

Мы не знали, как мы это будем делать.

But we did know one thing.

Но мы знали одно.

Being from the visual effects industry,

Будучи из индустрии видеоэффектов,

we, with David, believed that we now had enough time,

мы с Давидом верили, что на данный момент у нас есть достаточно времени,

enough resources, and, God, we hoped we had enough money.

достаточно ресурсов, и, дай-то бог, мы надеялись, достаточно денег.

And we had enough passion to will the processes and technology into existence.

И у нас было достаточно энтузиазма, чтобы воплотить в жизнь новые методы и технологии.

So, when you're faced with something like that,

Вообщем, когда перед вами стоит что-либо такое,

of course you've got to break it down.

конечно, это надо разделить на части.

You take the big problem and you break it down into smaller pieces

Берем большую проблему и делим ее на маленькие задачки,

and you start to attack that.

и принимаемся за них.

So we had three main areas that we had to focus on.

Итак, у нас было три основных области, на которых нам надо было сфокусироваться.

We needed to make Brad look a lot older --

Нам нужно было, чтобы Бред выглядел намного старше.

needed to age him 45 years or so.

Нам нужно было его состарить где-то лет на 45.

And we also needed to make sure that we could take Brad's idiosyncrasies,

И мы должны были быть уверены, что нам удастся выделить отличительные черты Бреда,

his little tics, the little subtleties that make him who he is

вплоть до еле уловимой мимики, которая и делает его тем, кто он есть,

and have that translate through our process

и перенести это в процессе нашей работы

so that it appears in Benjamin on the screen.

на Бенджамина на экране.

And we also needed to create a character

Также нам нужно было создать персонажа,

that could hold up under, really, all conditions.

который выдержал, это точно, всевозможные условия.

He needed to be able to walk in broad daylight,

Он мог бы гулять средь ясного дня,

at nighttime, under candlelight,

ночью, при свете свечи,

he had to hold an extreme close-up,

его можно было бы снимать очень крупным планом,

he had to deliver dialogue,

он мог бы вести диалоги,

he had to be able to run, he had to be able to sweat,

он мог бы бегать, он мог бы потеть,

he had to be able to take a bath, to cry,

он мог бы принять ванну, плакать,

he even had to throw up.

его могло бы даже вырвать.

Not all at the same time --

Не одновременно.

but he had to, you know, do all of those things.

Но он должен был, знаете ли, делать все эти вещи.

And the work had to hold up for almost the first hour of the movie.

И наша работа должна была поддерживать час экранного времени.

We did about 325 shots.

Мы сделали около 325 кинопроб.

So we needed a system that would allow Benjamin

Нам нужна была система, которая даст возможность Бенджамину

to do everything a human being can do.

делать все, что может делать человеческое существо.

And we realized that there was a giant chasm

И мы осознали, что существует глубокая пропасть

between the state of the art of technology in 2004

между состоянием технологией киноискусства в 2004 году

and where we needed it to be.

и тем, какой нам она была нужна.

So we focused on motion capture.

И мы сосредоточили свои усилия на захвате движения.

I'm sure many of you have seen motion capture.

Уверен, многие из вас уже знают о технологии "захват движения".

The state of the art at the time

На тот момент большим достижением было то,

was something called marker-based motion capture.

что называлось захват движения по меткам.

I'll give you an example here.

Приведу пример.

It's basically the idea of, you wear a leotard,

Вообщем, идея следующая: одеваем облегающий костюм,

and they put some reflective markers on your body,

а нам на тело прикрепляют отражающие метки,

and instead of using cameras,

и вместо камер используют

there're infrared sensors around a volume,

инфракрасные датчики, расположенные по всему помещению,

and those infrared sensors track the three-dimensional position

и эти инфракрасные датчики отслеживают положение этих меток в трехмерном пространстве

of those markers in real time.

в настоящем времени.

And then animators can take the data of the motion of those markers

И затем мультипликаторы получают информацию о движении этих меток

and apply them to a computer-generated character.

и применяют их к созданному с помощью компьютера герою.

You can see the computer characters on the right

С права вы видите, что компьютерные персонажи

are having the same complex motion as the dancers.

исполняют такие же сложные движения, как и танцоры.

But we also looked at numbers of other films at the time

А также мы просмотрели ряд фильмов того времени,

that were using facial marker tracking,

в которых использовали отслеживание движения по меткам на лице,

and that's the idea of putting markers on the human face

и была идея поместить метки на человеческое лицо

and doing the same process.

и сделать то же самое.

And as you can see, it gives you a pretty crappy performance.

Но как видите, получилось довольно паршиво.

That's not terribly compelling.

Не сильно впечатляет.

And what we realized

И тут мы осознали то, что

was that what we needed

нам нужно --

was the information that was going on between the markers.

это информация, что происходит между метками.

We needed the subtleties of the skin.

Нам были нужны мельчайшие движения кожи.

We needed to see skin moving over muscle moving over bone.

Нам нужно было передать движение кожи, взаимосвязано с движением мышцы и кости.

We needed creases and dimples and wrinkles and all of those things.

Нам были нужны складки и ямочки, и морщины, и тому подобные вещи.

Our first revelation was to completely abort and walk away from

Нашим первое открытие началось с того, что мы полностью отказались от

the technology of the day, the status quo, the state of the art.

технологии того времени, статуса кво, существующего положения в искусстве.

So we aborted using motion capture.

Итак мы отказались от использования технологии "захват движения".

And we were now well out of our comfort zone,

И таким образом мы вышли далеко за пределы зоны комфортных условий,

and in uncharted territory.

попав на неизведанную территорию.

So we were left with this idea

У нас была идея,

that we ended up calling "technology stew."

которую мы в конечном счете назвали "технологическая солянка".

We started to look out in other fields.

Мы начали вести поиски в других областях,

The idea was that we were going to find

и идея заключалась в том, что мы найдем

nuggets or gems of technology

крупицы или зародыши технологии,

that come from other industries like medical imaging,

которая придет из других индустрий, таких как медицинская визуализация,

the video game space,

мира видео игр,

and re-appropriate them.

и переработаем их.

And we had to create kind of a sauce.

И нам надо было создать что-то вроде соуса.

And the sauce was code in software

И этот соус -- программный код,

that we'd written to allow these disparate pieces of technology

который был написан нами для того, чтобы эти разрозненные куски технологий

to come together and work as one.

объединились и работали как один.

Initially, we came across some remarkable research

В начале мы случайно наткнулись на выдающиеся исследование,

done by a gentleman named Dr. Paul Ekman in the early '70s.

проведенное господином по имени доктор Пол Экмен в начале 70-х.

He believed that he could, in fact,

Он верил, что можно в действительности

catalog the human face.

каталогизировать человеческое лицо.

And he came up with this idea of Facial Action Coding System, or FACS.

И ему пришла идея создать систему кодировки лицевых движений.

He believed that there were 70 basic poses

Он считал, что существуют 70 основных поз

or shapes of the human face,

или образцов человеческого лица,

and that those basic poses or shapes of the face

и что из этих основных поз или образцов лица,

can be combined to create infinite possibilities

что их можно комбинировать для создания бесчисленных вариантов

of everything the human face is capable of doing.

всего, на что способно человеческое лицо.

And of course, these transcend age, race, culture, gender.

И конечно они не связаны с возрастом, расой, культурой и полом.

So this became the foundation of our research as we went forward.

Итак, это стало базой для наших дальнейших исследований.

And then we came across some remarkable technology

А затем мы нашли замечательную технологию

called Contour.

под названием Контур.

And here you can see a subject having phosphorus makeup

Вот тут вы видите субъекта с фосфорным составом,

stippled on her face.

нанесенным точечным пунктиром на ее лицо.

And now what we're looking at is really creating a surface capture

И теперь то, что мы с вами видим -- это действительно ловит движение поверхности

as opposed to a marker capture.

в отличие от захвата движения по меткам.

The subject stands in front of a computer array of cameras,

Субъект стоит перед массивом камер,

and those cameras can, frame-by-frame,

и эти камеры могут кадр за кадром

reconstruct the geometry of exactly what the subject's doing at the moment.

точно воссоздать геометрию того, что делает субъект в определенный момент.

So, effectively, you get 3D data in real time of the subject.

Итак, в сущности, получаем 3Д информацию о субъекте в реальном времени.

And if you look in a comparison,

Для сравнения:

on the left, we see what volumetric data gives us

слева видим, какой результат дает пространственная информация,

and on the right you see what markers give us.

а справа -- какой результат дают метки.

So, clearly, we were in a substantially better place for this.

Думаю, безусловно наш результат был существенно лучше.

But these were the early days of this technology,

Но это были дни зарождение этой технологии,

and it wasn't really proven yet.

и это нужно было еще доказать.

We measure complexity and fidelity of data

Мы измеряем степень сложности и точности информации

in terms of polygonal count.

в терминах полигонального счета.

And so, on the left, we were seeing 100,000 polygons.

Итак, слева мы видели 100 000 полигонов.

We could go up into the millions of polygons.

Мы могли дойти до миллионов полигонов.

It seemed to be infinite.

Казалось, это бесконечный процесс.

This was when we had our "Aha!"

Тут-то мы и сказали: "Вот оно!"

This was the breakthrough.

Это был прорыв.

This is when we're like, "OK, we're going to be OK,

Тогда мы думали: "Хорошо. У нас все будет хорошо.

This is actually going to work."

Это должно сработать".

And the "Aha!" was, what if we could take Brad Pitt,

А "вот оно!" было тут: что если бы мы взяли Бреда Пита,

and we could put Brad in this device,

и поместили Бреда в это устройство,

and use this Contour process,

и использовали этот контурный процесс,

and we could stipple on this phosphorescent makeup

мы бы могли нанести этот фосфоресцирующий состав

and put him under the black lights,

и поместить его под ультрафиолетовые лампы,

and we could, in fact, scan him in real time

то мы могли бы в действительности сканировать реальном времени то,

performing Ekman's FACS poses.

как он выполняет позы по Экмановской системе кодировки лицевых движений.

Right? So, effectively,

Здорово? Итак, в сущности,

we ended up with a 3D database

мы получили 3Д базу данных

of everything Brad Pitt's face is capable of doing.

всего, что лицо Бреда Пита способно изобразить.

(Laughter)

(Смех в зале)

From there, we actually carved up those faces

Отсюда мы фактически разъединяли эти лица

into smaller pieces and components of his face.

на маленькие кусочки и компоненты его лица.

So we ended up with literally thousands and thousands and thousands of shapes,

Вообщем, мы получили в буквальном смысле тысячи, десятки тысяч форм.

a complete database of all possibilities

Полную базу данных всего, что может

that his face is capable of doing.

изобразить его лицо.

Now, that's great, except we had him at age 44.

Ну, здорово, за исключением того, что у нас он был в возрасте 44 лет.

We need to put another 40 years on him at this point.

Нам предстояло состарить его еще на сорок лет на этой стадии.

We brought in Rick Baker,

Мы пригласили Рика Бейкера,

and Rick is one of the great makeup and special effects gurus

одного из гуру в области грима и спецэффектов

of our industry.

нашей индустрии.

And we also brought in a gentleman named Kazu Tsuji,

А также мы позвали господина по имени Казу Цуджи,

and Kazu Tsuji is one of the great photorealist sculptors of our time.

одного из величайших скульпторов-фотореалистов нашего времени.

And we commissioned them to make a maquette,

И мы поручили им сделать макет,

or a bust, of Benjamin.

т.е. бюст, Бенджамина.

So, in the spirit of "The Great Unveiling" -- I had to do this --

И по традиции торжественного открытия памятников -- я должен был сделать так --

I had to unveil something.

я должен был снять покрывало.

So this is Ben 80.

Итак, здесь Бену 80.

We created three of these:

Мы создали три подобных:

there's Ben 80, there's Ben 70, there's Ben 60.

Бен 80, 70, 60 лет.

And this really became the template for moving forward.

И это в действительности стало шаблоном, от которого мы двинулись вперед.

Now, this was made from a life cast of Brad.

А вот это сделано на основе слепка с Брэда.

So, in fact, anatomically, it is correct.

И в действительности, с анатомической точки зрения, здесь все правильно.

The eyes, the jaw, the teeth:

Глаза, челюсть, зубы ...

everything is in perfect alignment with what the real guy has.

все в полном соответствии с тем, что есть у настоящего парня.

We have these maquettes scanned into the computer

Эти макеты были нами отсканированы

at very high resolution --

при очень высоком разрешении.

enormous polygonal count.

Несметное количество полигонов.

And so now we had three age increments of Benjamin

Итак, теперь у нас имелись 3 Бенджамина разных возрастов,

in the computer.

занесенные в компьютер.

But we needed to get a database of him doing more than that.

Но нам нужны были не просто они сами, а база данных того, что они умеют делать.

We went through this process, then, called retargeting.

Мы провели такой процесс, который позднее назвали перенастройка.

This is Brad doing one of the Ekman FACS poses.

Это Брэд выполняет одну поз по системе Экмана.

And here's the resulting data that comes from that,

А это информация, которую мы получаем в результате,

the model that comes from that.

модель которая получается на этой основе.

Retargeting is the process of transposing that data

А перенастройка -- это процесс переноса данных

onto another model.

на другую модель.

And because the life cast, or the bust -- the maquette -- of Benjamin

И потому, что слепок с натуры, т.е. бюст -- макет -- Бенджамина,

was made from Brad,

был сделан с Брэда,

we could transpose the data of Brad at 44

мы могли перенести данные с Брэда в возрасте 44 лет

onto Brad at 87.

на Брэда в 87.

So now, we had a 3D database of everything Brad Pitt's face can do

И вот мы получили 3Д базы данных всего, что может изобразить лицо Брэда Пита

at age 87, in his 70s and in his 60s.

в возрасте 87 лет, 70 и 60 лет.

Next we had to go into the shooting process.

Далее мы должны были к процессу съёмок.

So while all that's going on,

И пока это все происходит,

we're down in New Orleans and locations around the world.

мы попадаем в Новый Орлеан и другие места по всему миру.

And we shot our body actors,

Мы сняли наших подставных актеров,

and we shot them wearing blue hoods.

и у всех у них были голубые капюшоны.

So these are the gentleman who played Benjamin.

Вот это человек, исполняющий роль Бенджамина.

And the blue hoods helped us with two things:

И эти голубые капюшоны помогли нам в двух случаях:

one, we could easily erase their heads;

во-первых, мы с легкостью могли стереть изображение их головы,

and we also put tracking markers on their heads

а также мы установили метки, отслеживающие перемещение головы,

so we could recreate the camera motion

таким образом мы могли воссоздать движение камеры

and the lens optics from the set.

и оптические эффекты.

But now we needed to get Brad's performance to drive our virtual Benjamin.

И теперь нам нужна была актерская игра Брэда для того, чтобы оживить наших виртуальных Бенджаминов.

And so we edited the footage that was shot on location

Итак, мы отредактировали снятый на месте материал,

with the rest of the cast and the body actors

где играл основной состав и подставные актеры,

and about six months later

и по прошествии шести месяцев

we brought Brad onto a sound stage in Los Angeles

мы пригласили Брэда на звукозаписывающую студию в Лос-Анжелесе, где

and he watched on the screen.

он смотрел на экран,

His job, then, was to become Benjamin.

и его задачей тогда было стать Бенджамином.

And so we looped the scenes.

Мы прокручивали сцены.

He watched again and again.

Он смотрел снова и снова.

We encouraged him to improvise.

Мы поощряли его на импровизацию.

And he took Benjamin into interesting and unusual places

И он привнес в образ Бенджамина много интересного, нового,

that we didn't think he was going to go.

того, чего мы даже не ожидали.

We shot him with four HD cameras

Мы снимали его четырьмя HD камерами,

so we'd get multiple views of him

чтобы получить множество его изображений,

and then David would choose the take of Brad being Benjamin

а затем Давид мог выбрать снимок Брэда в роли Бенджамина,

that he thought best matched the footage

который по его мнению лучше всего вписывается в отснятый материал

with the rest of the cast.

с другими актёрами.

From there we went into a process called image analysis.

И начиная отсюда, мы занялись процессом под названием "анализ изображения".

And so here, you can see again, the chosen take.

И вот здесь, посмотрите еще раз, выбранный снимок.

And you are seeing, now, that data being transposed on to Ben 87.

И сейчас мы наблюдаем, как данные переносятся на 87-летнего Бена.

And so, what's interesting about this is

И интересно здесь то, что

we used something called image analysis,

мы использовали вещь, под названием "анализ изображения",

which is taking timings from different components of Benjamin's face.

который в данный момент выполняет синхронизацию различных составных частей лица Бенджамина.

And so we could choose, say, his left eyebrow.

И, например, мы могли бы остановиться на его левой брови.

And the software would tell us that, well,

И программное обеспечение сказало бы нам, ну,

in frame 14 the left eyebrow begins to move from here to here,

в блоке 14 левая бровь начинает двигаться отсюда туда,

and it concludes moving in frame 32.

и она завершает движение в блоке 32.

And so we could choose numbers of positions on the face

И так мы могли выбирать множество позиций на лице

to pull that data from.

для получения подобной информации.

And then, the sauce I talked about with our technology stew --

А теперь тот соус, про который я говорил, вместе с нашей технологической солянкой,

that secret sauce was, effectively, software that allowed us to

этот секретный соус был в сущности программным обеспечением. которое позволило нам

match the performance footage of Brad

согласовать отснятый материал по Брэду

in live action with our database of aged Benjamin,

с нашей базой данных по постаревшему Бенджамину,

the FACS shapes that we had.

формами по системе кодировки лицевых движений, которая у нас имелась.

On a frame-by-frame basis,

Кадр за кадром

we could actually reconstruct a 3D head

мы смогли воссоздать голову в 3Д измерении,

that exactly matched the performance of Brad.

которая полностью соответствовала игре Брэда.

So this was how the finished shot appeared in the film.

Таким образом законченный кадр появлялся в фильме.

And here you can see the body actor.

Здесь вы ведите подставного актера.

And then this is what we called the "dead head," no reference to Jerry Garcia.

А тут-то что мы называли "мертвой головой", это не связано с творчеством Джерри Гарсия.

And then here's the reconstructed performance

А здесь реконструированное исполнение

now with the timings of the performance.

уже синхронизированно с окружением.

And then, again, the final shot.

А вот снова финальный кадр.

It was a long process.

Это был долгий процесс.

(Applause)

(Аплодисменты)

The next section here, I'm going to just blast through this,

Следующий момент, в двух словах,

because we could do a whole TEDTalk on the next several slides.

потому что можно сделать отдельное выступление на TED на основании следующих нескольких слайдов.

We had to create a lighting system.

Нам нужно было создать систему освещения.

So really, a big part of our processes was creating a lighting environment

Фактически большая часть нашей работы приходилась на создание освещения

for every single location that Benjamin had to appear

в каждом отдельном месте появления Бенджамина,

so that we could put Ben's head into any scene

так, что сможем поместить голову Бена в любую сцену,

and it would exactly match the lighting that's on the other actors

и ее освещение будет полностью соответствовать освещению других актёров

in the real world.

в реальном мире.

We also had to create an eye system.

Также нам пришлось создать глаза.

We found the old adage, you know,

Мы нашли, что старинная поговорка, помните,

"The eyes are the window to the soul,"

"Глаза -- зеркало души",

absolutely true.

очень верна.

So the key here was to keep everybody looking in Ben's eyes.

Поэтому тут было важным сделать так,чтобы все смотрели Бену в глаза.

And if you could feel the warmth, and feel the humanity,

И если вы смогли бы почувствовать теплоту, почувствовать человечность,

and feel his intent coming through the eyes,

почувствовать стремление в его глазах,

then we would succeed.

тогда бы мы достигли своей цели.

So we had one person focused on the eye system

Поэтому за глаза у нас отвечал отдельный человек,

for almost two full years.

практически в течение двух целых лет.

We also had to create a mouth system.

Нам также пришлось создать ротовую систему.

We worked from dental molds of Brad.

Мы работали на основе зубных слепков Брэда.

We had to age the teeth over time.

Нам пришлось состарить зубы в соответствии с возрастом героя.

We also had to create an articulating tongue that allowed him to enunciate his words.

Также нам пришлось создать производящий звуки речи язык, который позволил бы ему отчётливо произносить слова.

There was a whole system written in software to articulate the tongue.

На языке программирования была написана целая система, отвечающая за артикуляцию языка.

We had one person devoted to the tongue for about nine months.

У нас сотрудник посвятил около девяти месяцев на язык.

He was very popular.

Он пользовался популярностью.

Skin displacement: another big deal.

Изменение кожи: ещё одна важная вещь.

The skin had to be absolutely accurate.

Кожа должна выглядеть абсолютно естественно,

He's also in an old age home, he's in a nursing home

а ведь он находится в заведении для ухода за престарелыми, в доме престарелых

around other old people,

в окружении других пожилых людей,

so he had to look exactly the same as the others.

поэтому он должен был выглядеть точно также, как и другие.

So, lots of work on skin deformation,

Поэтому много работы было с состариванием кожи;

you can see in some of these cases it works,

видите -- в некоторых случаях получилось,

in some cases it looks bad.

в некоторых -- не очень;

This is a very, very, very early test in our process.

это самые, самые ранние испытания в нашем процессе.

So, effectively we created a digital puppet

Вообщем, фактически мы создали цифровую марионетку,

that Brad Pitt could operate with his own face.

которой Брэд Пит мог управлять с помощью своего лица.

There were no animators necessary to come in and interpret behavior

Тут не нужны мультипликаторы для того, чтобы передавать его поведение

or enhance his performance.

или улучшать его игру.

There was something that we encountered, though,

Однако мы натолкнулись на то,

that we ended up calling "the digital Botox effect."

что в конце концов назвали " эффектом цифрового Ботокса".

So, as things went through this process,

По мере того, как шёл этот процесс,

Fincher would always say, "It sandblasts the edges off of the performance."

Финчер всегда повторял: "Это уменьшает остроту игры".

And thing our process and the technology couldn't do,

И единственную вещь, которую наш процесс и наша технология не могли сделать --

is they couldn't understand intent,

это они не могли понять цель,

the intent of the actor.

намерение актера.

So it sees a smile as a smile.

Т.е. улыбка виделась, как просто улыбка.

It doesn't recognize an ironic smile, or a happy smile,

Не распознавалась ироническая улыбка или счастливая улыбка,

or a frustrated smile.

или разочарованная улыбка.

So it did take humans to kind of push it one way or another.

Люди же улыбаются по-разному.

But we ended up calling the entire process

Но мы в конце концов пришли к тому, чтобы назвать весь процесс

and all the technology "emotion capture,"

и всю технологию "захват эмоции"

as opposed to just motion capture.

в противопоставление к просто захвату движения.

Take another look.

Давай-те посмотрим еще разок.

Brad Pitt: Well, I heard momma and Tizzy whisper,

Брэд Пит: Ну, я слышал, как мамуля и Тиззи шептались,

and they said I was gonna die soon,

и они говорили, что я должен вскоре умереть.

but ... maybe not.

Но... может быть нет.

EU: That's how to create a digital human in 18 minutes.

Эд Албрич: Вот как можно создать компьютерного человека за 18 минут.

(Applause)

(Аплодисменты)

A couple of quick factoids;

Парочка любопытных фактов.

it really took 155 people over two years,

Над проектом работали 155 людей в течении двух лет,

and we didn't even talk about 60 hairstyles and an all-digital haircut.

это не говоря еще о 60 прическах и полностью цифровых стрижках.

But, that is Benjamin. Thank you.

Но так получился Бенджамин. Спасибо.