Ed Ulbrich: How Benjamin Button got his face

エド・ウルブリッチ：ベンジャミン・バトンの顔はこうしてできた

翻訳: Haruka Nishimura 校正: Hiroko Nagata

I'm here today representing a team of artists and technologists and filmmakers

今日私は 4年間のすばらしい映画製作プロジェクトに共に関わった

that worked together on a remarkable film project for the last four years.

アーティスト 技術者 映画製作者のチームの代表としてここに来ています

And along the way they created a breakthrough in computer visualization.

この過程でコンピュータ ビジュアリゼーションは大きく進歩しました

So I want to show you a clip of the film now.

これから映画のクリップをお見せします

Hopefully it won't stutter.

きちんと映像が流れるといいのですが

And if we did our jobs well, you won't know that we were even involved.

仕事が成功していたら 私たちの存在は気づかれないはずです

Voice (Video): I don't know how it's possible ...

映像：どうしてかしら―

but you seem to have more hair.

前より髪が増えてるわ

Brad Pitt: What if I told you that I wasn't getting older ...

ベンジャミン バトン：年を取るごとに―

but I was getting younger than everybody else?

若返っていく僕をみんなはどう思う？

I was born with some form of disease.

持病を持って生まれたんだ―

Voice: What kind of disease?

声：どんな病気で？

BP: I was born old.

ベンジャミン：老人の体で生まれた

Man: I'm sorry.

男：お気の毒に

BP: No need to be. There's nothing wrong with old age.

ベンジャミン：年を取るのは悪いことじゃない

Girl: Are you sick?

少女：病気なの？

BP: I heard momma and Tizzy whisper,

ベンジャミン：ママとティズィーは―

and they said I was gonna die soon.

数年の命と言っていたけど―

But ... maybe not.

たぶん違う

Girl: You're different than anybody I've ever met.

少女：あなたは他の誰とも違うわ

BB: There were many changes ...

ベンジャミン：多くの変化が訪れた

some you could see, some you couldn't.

目に見えるものと 目に見えないもの

Hair started growing in all sorts of places,

色んな場所に毛が生え始めたり―

along with other things.

他にも変化はあった

I felt pretty good, considering.

気分がよかった

Ed Ulbrich: That was a clip from "The Curious Case of Benjamin Button."

エド：「ベンジャミン バトン 数奇な人生」からの映像でした

Many of you, maybe you've seen it or you've heard of the story,

映画を見られた方も ストーリーを耳にした方も―

but what you might not know

知らないことがあるとすれば

is that for nearly the first hour of the film,

映画の最初 ほぼ１時間にわたって

the main character, Benjamin Button, who's played by Brad Pitt,

ブラッド ピットが演じる主人公のベンジャミン バトンの―

is completely computer-generated from the neck up.

首から上は完全にCGだということです

Now, there's no use of prosthetic makeup

特殊メイクは使っていませんし―

or photography of Brad superimposed over another actor's body.

他の俳優の体にブラッドのイメージを合成したものでもありません

We've created a completely digital human head.

完全なるCGの顔を作りあげました

So I'd like to start with a little bit of history on the project.

まずはこのプロジェクトの歴史を少しお話したいと思います

This is based on an F. Scott Fitzgerald short story.

F スコット フィッツジェラルドの短編小説をもとにした―

It's about a man who's born old and lives his life in reverse.

老人として生まれ 成長するにしたがって若返っていく男の話です

Now, this movie has floated around Hollywood

この映画はハリウッド中をぐるぐると

for well over half a century,

50年以上もさまよっていました

and we first got involved with the project in the early '90s,

私たちが最初にこのプロジェクトに参加したのは90年代初頭で

with Ron Howard as the director.

ロン ハワードが監督でした

We took a lot of meetings and we seriously considered it.

何度も会議を開き映画化を真剣に考えました

But at the time we had to throw in the towel.

しかし当時は諦めなければなりませんでした

It was deemed impossible.

不可能だとみなされたのです

It was beyond the technology of the day to depict a man aging backwards.

年を取るにつれて若返る男を描くのは当時の技術では無理でした

The human form, in particular the human head,

人間の体は―特に頭部ですが―

has been considered the Holy Grail of our industry.

私たちの業界では神の領域とされていました

The project came back to us about a decade later,

10年ほど経ってからプロジェクトが再始動しました

and this time with a director named David Fincher.

今回の監督はデイビット フィンチャーです

Now, Fincher is an interesting guy.

彼は面白い人です

David is fearless of technology,

技術に対して恐怖心というものがないのです

and he is absolutely tenacious.

またプロジェクトに強い執着がありました

And David won't take "no."

「ノー」は存在しなかったのです

And David believed, like we do in the visual effects industry,

デイビットはビジュアルエフェクト業界の人間と同じように―

that anything is possible

十分な時間と資源ー

as long as you have enough time, resources and, of course, money.

そしてもちろんお金がある限り 全ては可能だと信じていました

And so David had an interesting take on the film,

彼は面白い取り組み方をして―

and he threw a challenge at us.

私たちにある挑戦をさせることにしました

He wanted the main character of the film to be played

映画の主人公を ゆりかごから墓場まで―

from the cradle to the grave by one actor.

一人の俳優で撮影すると言い出したのです

It happened to be this guy.

主人公は彼になりました

We went through a process of elimination and a process of discovery

私たちはデイビットと共にあれでもないこれでもないと考え抜き

with David, and we ruled out, of course, swapping actors.

当然 映画の途中で俳優を入れ替える案は除外されました

That was one idea: that we would have different actors,

何人かの俳優を使うのはひとつの手でした

and we would hand off from actor to actor.

シーン別に違う俳優がベンジャミンを演じるのです

We even ruled out the idea of using makeup.

特殊メイクを施すアイデアも除外しました

We realized that prosthetic makeup just wouldn't hold up,

メイクでは不十分だということが分かったのです

particularly in close-up.

特にクローズアップでは無理です

And makeup is an additive process. You have to build the face up.

それにメイクは付加的なプロセスで 顔を作り上げるのとは違います

And David wanted to carve deeply into Brad's face

デイビットは年を重ねたしわを表現するのに

to bring the aging to this character.

ブラッドの顔の奥深くまで切り込んでいきたかったのです

He needed to be a very sympathetic character.

ベンジャミンは多くの共感を呼ぶ人物でなければなりません

So we decided to cast a series of little people

そこで年を経るにつれて変わる―

that would play the different bodies of Benjamin

ベンジャミンの体のサイズに合わせ―

at the different increments of his life

背の低い役者を段階的に割り当てることにしました

and that we would in fact create a computer-generated version of Brad's head,

それから実際にベンジャミンと年相応の―

aged to appear as Benjamin,

ブラッドの頭部をCGで作り上げ

and attach that to the body of the real actor.

本物の俳優の首の上に乗せるのです

Sounded great.

良い計画だと思いました

Of course, this was the Holy Grail of our industry,

もちろんこれは私たちの業界における聖域であり―

and the fact that this guy is a global icon didn't help either,

世界に名の知れた俳優を使うことで 難しさは増しました

because I'm sure if any of you ever stand in line at the grocery store,

誰もがスーパーで見かける雑誌などを通して

you know -- we see his face constantly.

毎日のように彼の顔を見ているのですから

So there really was no tolerable margin of error.

少しのずれもミスも許されないのです

There were two studios involved: Warner Brothers and Paramount.

映画会社はワーナー ブラザーズとパラマウントが関わりました

And they both believed this would make an amazing film, of course,

両スタジオはこの映画にもちろん期待してくれたのですが

but it was a very high-risk proposition.

この映画はかなりリスクの高い計画でした

There was lots of money and reputations at stake.

多くの資金と名誉が問われていました

But we believed that we had a very solid methodology

私たちは 自分たちの方法論はとても堅実でうまくいくだろうー

that might work ...

と信じていましたがー

But despite our verbal assurances,

彼らは口約束以外に－

they wanted some proof.

できるという保証を欲しがりました

And so, in 2004, they commissioned us to do a screen test of Benjamin.

ですから2004年にベンジャミンのスクリーンテストをすることになりました

And we did it in about five weeks.

5週間ほどにわたって行われたのですが－

But we used lots of cheats and shortcuts.

たくさんのズルや近道をしました

We basically put something together to get through the meeting.

テストを切り抜けるために断片をつなぎ合わせたにすぎませんでした

I'll roll that for you now. This was the first test for Benjamin Button.

少しお見せします こちらが最初のベンジャミンのテスト映像です

And in here, you can see, that's a computer-generated head --

CGの頭がお見えですね

pretty good -- attached to the body of an actor.

かなりの精度です 他の俳優の首の上にのせました

And it worked. And it gave the studio great relief.

テストは成功し スタジオを安心させることができました

After many years of starts and stops on this project,

何年間も前進と後退を続け－

and making that tough decision,

困難な決断を下しながら

they finally decided to greenlight the movie.

ついにスタジオからゴーサインが出ました

And I can remember, actually, when I got the phone call to congratulate us,

実際に電話で祝賀をいただいたときのことを覚えています

to say the movie was a go,

映画に許可が下りたと聞いて

I actually threw up.

思わず吐きました

(Laughter)

（笑い）

You know, this is some tough stuff.

計画は困難なものであったので

So we started to have early team meetings,

チームミーティングを行うことにしました

and we got everybody together,

全員参加です

and it was really more like therapy in the beginning,

最初のうちは会議というよりセラピーに近いものでした

convincing each other and reassuring each other that we could actually undertake this.

この映画は実際に現実のものとなる とお互いを励まし説得しました

We had to hold up an hour of a movie with a character.

映画全体の内1時間はCGのベンジャミンが主演です

And it's not a special effects film; it has to be a man.

しかもSFX映画ではないので 本物の人間らしくなければなりませんでした

We really felt like we were in a -- kind of a 12-step program.

そのプロセスは ある意味では 依存症克服プログラムのようでー

And of course, the first step is: admit you've got a problem. (Laughter)

最初の一歩は当然「問題の存在を認めること」

So we had a big problem:

大きな問題でした

we didn't know how we were going to do this.

どうやって取り組めばいいのかも分からなかったのですから

But we did know one thing.

けれどひとつだけ分かっていることがありました

Being from the visual effects industry,

VFX業界で働く者としてー

we, with David, believed that we now had enough time,

私たち それからデイビットは時間も資源も豊富だと分かっていました

enough resources, and, God, we hoped we had enough money.

資金が足りることだけを願いました

And we had enough passion to will the processes and technology into existence.

プロジェクトを実現させるための熱意も十分にありました

So, when you're faced with something like that,

このような問題に直面したらー

of course you've got to break it down.

まず問題を細かく砕いてから考えます

You take the big problem and you break it down into smaller pieces

大きな問題をいくつかの小さな問題に分けるのです

and you start to attack that.

それから一つ一つに取り組みます

So we had three main areas that we had to focus on.

私たちはこれを３つに分けました

We needed to make Brad look a lot older --

まずブラッドに今の年齢よりも

needed to age him 45 years or so.

45歳くらい年を取らせなければなりませんでした

And we also needed to make sure that we could take Brad's idiosyncrasies,

またブラッドの特徴を取り入れることも必要でした

his little tics, the little subtleties that make him who he is

顔の小さな痙攣や機微のすべてが彼を彼たらしめているのでー

and have that translate through our process

全ての過程でそれらを取り入れ

so that it appears in Benjamin on the screen.

スクリーンのベンジャミンに反影させる必要がありました

And we also needed to create a character

それからベンジャミンは

that could hold up under, really, all conditions.

あらゆる状況に対応できるキャラクターでなければなりませんでした

He needed to be able to walk in broad daylight,

真っ昼間だけでなく

at nighttime, under candlelight,

夜 キャンドルの光の下を歩いたり

he had to hold an extreme close-up,

クローズアップにも耐えられ

he had to deliver dialogue,

もちろん台詞も話せて

he had to be able to run, he had to be able to sweat,

走ったり汗をかいたり

he had to be able to take a bath, to cry,

お風呂に入ったり泣いたり

he even had to throw up.

吐くことすらできなくてはなりませんでした

Not all at the same time --

もちろん全て同時にではありませんが

but he had to, you know, do all of those things.

これら全てをこなせる必要がありました

And the work had to hold up for almost the first hour of the movie.

そしてそれらで映画のはじめ1時間を作らなければならなかったので

We did about 325 shots.

およそ325パターンの撮影をしました

So we needed a system that would allow Benjamin

私たちにはベンジャミンにー

to do everything a human being can do.

人間ができる全てのことをさせる必要があったのですが

And we realized that there was a giant chasm

2004年当時の最先端技術と

between the state of the art of technology in 2004

私たちの要する技術との間には

and where we needed it to be.

深い淵があることに気づきました

So we focused on motion capture.

そこでモーションキャプチャーに注目しました

I'm sure many of you have seen motion capture.

モーションキャプチャーはご存知ですね

The state of the art at the time

当時の最先端技術では

was something called marker-based motion capture.

マーカーベース モーションキャプチャーと言われていました

I'll give you an example here.

こちらが例です

It's basically the idea of, you wear a leotard,

簡単に説明すると レオタードを着て

and they put some reflective markers on your body,

動きを捕らえるマーカーを装着します

and instead of using cameras,

カメラの代わりに

there're infrared sensors around a volume,

赤外線センサーが周囲に置かれ

and those infrared sensors track the three-dimensional position

それらのセンサーがマーカーの動きを３次元かつ

of those markers in real time.

リアルタイムでトラックします

And then animators can take the data of the motion of those markers

それからアニメーターはマーカーの動きのデータを

and apply them to a computer-generated character.

CGの俳優に写していきます

You can see the computer characters on the right

右側のコンピュータ上のキャラクターが

are having the same complex motion as the dancers.

ダンサーと同じ複雑な動きをしていますね

But we also looked at numbers of other films at the time

さらに私たちは 顔にマーカーをつけて－

that were using facial marker tracking,

モーションキャプチャーを顔に適応している

and that's the idea of putting markers on the human face

当時の映画をいくつか見て

and doing the same process.

プロセスを研究しました

And as you can see, it gives you a pretty crappy performance.

見てわかる通り とても雑な出来栄えです

That's not terribly compelling.

完成にはほど遠いものでした

And what we realized

そこでわかったのは

was that what we needed

私たちには－

was the information that was going on between the markers.

マーカーとマーカーの間にある情報が必要だということです

We needed the subtleties of the skin.

皮膚の細かい情報が欠けていました

We needed to see skin moving over muscle moving over bone.

皮膚が筋肉や骨の上を動く様子や

We needed creases and dimples and wrinkles and all of those things.

えくぼ 大きなしわから小さなしわまで全ての情報が必要でした

Our first revelation was to completely abort and walk away from

私たちの最初の発見は 当時の最先端技術も手法も

the technology of the day, the status quo, the state of the art.

完全に捨て去らなくてはならない ということでした

So we aborted using motion capture.

モーションキャプチャーも諦め

And we were now well out of our comfort zone,

頼れるものは何一つなくなりー

and in uncharted territory.

未開の地に踏み込むこととなりました

So we were left with this idea

残されたアイデアは

that we ended up calling "technology stew."

私たちが「テクノロジー シチュー」と呼ぶものです

We started to look out in other fields.

他のフィールドを研究して

The idea was that we were going to find

技術の原石を見つけるというのが

nuggets or gems of technology

このアイデアです

that come from other industries like medical imaging,

医学画像やテレビゲームなどの

the video game space,

優れた他業界の技術をー

and re-appropriate them.

見つけだし 再適応させるのです

And we had to create kind of a sauce.

コンピュータのプログラムの中に

And the sauce was code in software

コード情報を書き込んでいって

that we'd written to allow these disparate pieces of technology

それぞれ異なる技術の断片を組み合わせて

to come together and work as one.

ひとつの技術として動かすのです

Initially, we came across some remarkable research

初めてすぐに 70年代にポール エクマンという学者によってなされた

done by a gentleman named Dr. Paul Ekman in the early '70s.

すばらしい研究に遭遇しました

He believed that he could, in fact,

彼は実際に人間の表情を－

catalog the human face.

分類できると考え

And he came up with this idea of Facial Action Coding System, or FACS.

FACS－顔動作記述システム－を作り出しました

He believed that there were 70 basic poses

このシステムによると人間の顔は

or shapes of the human face,

基本的に70の型からできていて

and that those basic poses or shapes of the face

それらの顔のポーズや形を組み合わせて

can be combined to create infinite possibilities

人間の顔ができる

of everything the human face is capable of doing.

無限の表情を作り出すことができるというわけです

And of course, these transcend age, race, culture, gender.

しかも年齢や人種 文化やジェンダーを問わないシステムでした

So this became the foundation of our research as we went forward.

これが私たちの研究のベースになりました

And then we came across some remarkable technology

それから私たちはコンターと呼ばれる

called Contour.

驚くべき技術に出会いました

And here you can see a subject having phosphorus makeup

被験者が発光性のメイクを－

stippled on her face.

顔に施されているのがお見えですね

And now what we're looking at is really creating a surface capture

ここでは マーカーから得る情報とは逆に

as opposed to a marker capture.

表面の情報を捕らえています

The subject stands in front of a computer array of cameras,

被験者はカメラが並んだコンピュータの前に立つと

and those cameras can, frame-by-frame,

カメラがフレームごとに

reconstruct the geometry of exactly what the subject's doing at the moment.

被験者がとっているのと全く同じ顔の表情を復元していきます

So, effectively, you get 3D data in real time of the subject.

効果的にリアルタイムで被験者の3Dデータがとれるのです

And if you look in a comparison,

比べて見てみると

on the left, we see what volumetric data gives us

左側がデータ数が増えたもの

and on the right you see what markers give us.

右側がマーカーデータのものです

So, clearly, we were in a substantially better place for this.

見ての通り かなり見通しが良くなりました

But these were the early days of this technology,

しかしこの技術は当時まだ生みだされて間もなく

and it wasn't really proven yet.

確実性はありませんでした

We measure complexity and fidelity of data

けれど私たちはポリゴンの観点から

in terms of polygonal count.

複雑かつ信憑性のあるデータ測定をしました

And so, on the left, we were seeing 100,000 polygons.

左側では10万ものポリゴンが見えました

We could go up into the millions of polygons.

そしてそれを100万まで増やすことに成功し

It seemed to be infinite.

その数は無限に近づいていきました

This was when we had our "Aha!"

歓喜が沸いたのはこのときでした

This was the breakthrough.

これが突破口となったからです

This is when we're like, "OK, we're going to be OK,

「これで何とかなる 実際に成功するだろう」

This is actually going to work."

と初めて考えた瞬間でした

And the "Aha!" was, what if we could take Brad Pitt,

その歓喜は被験者をブラッド ピットに置き換え

and we could put Brad in this device,

この装置を彼の顔につけることにつながりました

and use this Contour process,

このコンターを使って

and we could stipple on this phosphorescent makeup

彼に発光性のメイクを施し

and put him under the black lights,

不可視光線の下に立ってもらって

and we could, in fact, scan him in real time

実際に彼がエクマンのFACSシステムになぞって

performing Ekman's FACS poses.

表情を作るのをリアルタイムで読み取りました

Right? So, effectively,

実際に－

we ended up with a 3D database

ブラッド ピットの顔が表現できる

of everything Brad Pitt's face is capable of doing.

全ての表情の3Dデータベースができあがりました

(Laughter)

（笑い）

From there, we actually carved up those faces

そこからは実際にもっと細かい要素にまでー

into smaller pieces and components of his face.

切り込んでいって

So we ended up with literally thousands and thousands and thousands of shapes,

文字通り何千という型ができあがりました

a complete database of all possibilities

彼の顔が表現できる表情

that his face is capable of doing.

全てのデータベースが出来上がりました

Now, that's great, except we had him at age 44.

彼が44歳であるという事以外は完璧でした

We need to put another 40 years on him at this point.

次は現在の彼の年齢に40年を加算する作業です

We brought in Rick Baker,

私たちはリック ベーカーに連絡しました

and Rick is one of the great makeup and special effects gurus

彼は私たちの業界では特殊メイクや特殊効果の－

of our industry.

巨匠といわれています

And we also brought in a gentleman named Kazu Tsuji,

またカズヒロ ツジにも依頼をしました

and Kazu Tsuji is one of the great photorealist sculptors of our time.

彼はフォトリアリスティック彫刻の最高峰です

And we commissioned them to make a maquette,

彼らにベンジャミンの上半身の模型作りを－

or a bust, of Benjamin.

依頼しました

So, in the spirit of "The Great Unveiling" -- I had to do this --

それでは今年の会議テーマ「素晴らしい除幕」にちなんで

I had to unveil something.

ベールをとると－

So this is Ben 80.

こちらが80歳のベンジャミンです

We created three of these:

模型は3つ作りました

there's Ben 80, there's Ben 70, there's Ben 60.

80歳 70歳それから60歳のベンジャミンです

And this really became the template for moving forward.

これらが私たちが前進する基盤となりました

Now, this was made from a life cast of Brad.

ブラッドの型どりから作り上げた実物大なので

So, in fact, anatomically, it is correct.

解剖学的にも正しいデータです

The eyes, the jaw, the teeth:

目やあご 歯にいたるまで－

everything is in perfect alignment with what the real guy has.

全てが1対1で本物のブラッドと対応しています

We have these maquettes scanned into the computer

私たちはこれら３つの模型を高解像度で

at very high resolution --

コンピュータに取り込みました

enormous polygonal count.

莫大なポリゴン数です

And so now we had three age increments of Benjamin

そうしてコンピュータ上に３段階の年齢の－

in the computer.

ベンジャミンが生まれました

But we needed to get a database of him doing more than that.

今度はそのデータ上の彼に動きを加えるため

We went through this process, then, called retargeting.

リターゲティングと呼ばれるプロセスに移りました

This is Brad doing one of the Ekman FACS poses.

こちらがブラッドがエクマンのFACSの表情をしているところです

And here's the resulting data that comes from that,

それから得られるデータがこちらです

the model that comes from that.

モデル上のデータですね

Retargeting is the process of transposing that data

そしてリターゲティングとはこのデータを

onto another model.

他のモデルに転置することです

And because the life cast, or the bust -- the maquette -- of Benjamin

ベンジャミンの上半身の模型は

was made from Brad,

ブラッドの実物大なので

we could transpose the data of Brad at 44

44歳のブラッドのデータを87歳のブラッドに

onto Brad at 87.

転置することができるのです

So now, we had a 3D database of everything Brad Pitt's face can do

ブラッド ピットの顔の動き全ての３Dデータが

at age 87, in his 70s and in his 60s.

87歳それから70代 60代の彼に転置されました

Next we had to go into the shooting process.

次は撮影の段階に入ります

So while all that's going on,

これまでの過程と同時並行で

we're down in New Orleans and locations around the world.

ニューオリンズを始めとする世界中のロケ地で撮影は進められました

And we shot our body actors,

ベンジャミンの体を演じる役者は

and we shot them wearing blue hoods.

青いフード帽をかぶって撮影に入ります

So these are the gentleman who played Benjamin.

こちらがその役者の方です

And the blue hoods helped us with two things:

青いフード帽には2つの役割があります

one, we could easily erase their heads;

彼らの頭部を消す処理が簡単にできることと

and we also put tracking markers on their heads

動きを捉えるマーカーをつけることで

so we could recreate the camera motion

カメラの動きやレンズの焦点を

and the lens optics from the set.

再現できることです

But now we needed to get Brad's performance to drive our virtual Benjamin.

ベンジャミンのモデルはブラッドの演技を反影して動かすので

And so we edited the footage that was shot on location

ロケ地で他の出演者やベンジャミンの体の役者を撮影したー

with the rest of the cast and the body actors

フィルムの編集に入りました

and about six months later

そして約6ヶ月後

we brought Brad onto a sound stage in Los Angeles

ロサンゼルスの同録スタジオにブラッドを呼びました

and he watched on the screen.

彼はスクリーンを見て

His job, then, was to become Benjamin.

ベンジャミンを演じます

And so we looped the scenes.

彼は映画のシーンを

He watched again and again.

繰り返し何度も見ました

We encouraged him to improvise.

即興の演技をお願いすると

And he took Benjamin into interesting and unusual places

ブラッドは私たちが予想だにしなかった

that we didn't think he was going to go.

興味深いベンジャミンを演じてくれました

We shot him with four HD cameras

撮影はいくつかのアングルからとらえるため

so we'd get multiple views of him

４台のHDカメラで行いました

and then David would choose the take of Brad being Benjamin

ブラッドが演じたベンジャミンの中から 今度はデイビットがー

that he thought best matched the footage

場面や他の出演者と最もよく合うものを

with the rest of the cast.

選んでいきました

From there we went into a process called image analysis.

そこからは画像解析という過程に入ります

And so here, you can see again, the chosen take.

こちらでは選ばれたテイクがお見えですね

And you are seeing, now, that data being transposed on to Ben 87.

データが87歳のベンジャミンに転置されています

And so, what's interesting about this is

ここでおもしろいのは

we used something called image analysis,

ベンジャミンの顔の

which is taking timings from different components of Benjamin's face.

それぞれのパーツが動くタイミングをはかる画像解析です

And so we could choose, say, his left eyebrow.

例えばベンジャミンの左の眉毛を選ぶと

And the software would tell us that, well,

コンピュータプログラムが

in frame 14 the left eyebrow begins to move from here to here,

フレーム14では眉毛はここからここまで動きー

and it concludes moving in frame 32.

フレーム32で止まるという事を教えてくれます

And so we could choose numbers of positions on the face

このようにしていくつもの顔の動きを選んで

to pull that data from.

データを引き出していくのです

And then, the sauce I talked about with our technology stew --

それからテクノロジーシチューでお話しした技術を使います

that secret sauce was, effectively, software that allowed us to

鍵となる技術は 効果的に－

match the performance footage of Brad

ブラッドの動作そのものを

in live action with our database of aged Benjamin,

FACSシステムに基づく データベース上のー

the FACS shapes that we had.

年を取ったベンジャミンに移すこと

On a frame-by-frame basis,

これを使って私たちはフレームごとに

we could actually reconstruct a 3D head

ブラッドの演技と全く同じ動きをする3Dの頭部を

that exactly matched the performance of Brad.

再現することができました

So this was how the finished shot appeared in the film.

こちらが完成したフィルムの映像です

And here you can see the body actor.

そしてこちらが体を演じる俳優の演技

And then this is what we called the "dead head," no reference to Jerry Garcia.

これが－ジェリー ガルシアではありませんが－未完成の「デットヘッド」

And then here's the reconstructed performance

そして今度は実際の演技のタイミングから

now with the timings of the performance.

再現したものです

And then, again, the final shot.

そしてもう一度完成した映像です

It was a long process.

ここまで来るのには時間がかかりました

(Applause)

（拍手）

The next section here, I'm going to just blast through this,

次の数枚のスライドだけでも ひとつのTEDトークになるほど

because we could do a whole TEDTalk on the next several slides.

お話できるのですが ここからは概要だけお話します

We had to create a lighting system.

今度は照明効果を完成させなければなりませんでした

So really, a big part of our processes was creating a lighting environment

この工程で重要なのはベンジャミンが現れる全ての場面に適した－

for every single location that Benjamin had to appear

照明を作り上げることでした

so that we could put Ben's head into any scene

ベンジャミンの頭部は様々な場面に出てくるので

and it would exactly match the lighting that's on the other actors

ロケ地で他の俳優が演技をしている照明と

in the real world.

完璧に合うものにしなければなりません

We also had to create an eye system.

それから目に特化したシステムも作り出しました

We found the old adage, you know,

「目は口ほどにものを言う」という

"The eyes are the window to the soul,"

あの古いことわざは

absolutely true.

嘘ではありません

So the key here was to keep everybody looking in Ben's eyes.

ここでのゴールは 多くの人にベンジャミンの目だけを見てもらって

And if you could feel the warmth, and feel the humanity,

温かさや優しさ

and feel his intent coming through the eyes,

それから彼の意図するところが

then we would succeed.

目を通して伝わることです

So we had one person focused on the eye system

ですから目の動きを担当した技術者は

for almost two full years.

ほぼ丸２年間目の研究に明け暮れました

We also had to create a mouth system.

それから口に特化したシステムも必要でした

We worked from dental molds of Brad.

ブラッドの歯の型をベースにして

We had to age the teeth over time.

時と共に歯にも変化を加えました

We also had to create an articulating tongue that allowed him to enunciate his words.

それから言葉をしっかり発音するための舌も必要でした

There was a whole system written in software to articulate the tongue.

発話時の舌の動き全てを記録したシステムも作りました

We had one person devoted to the tongue for about nine months.

舌の動きだけに約9ヶ月専念してくれた人がいて

He was very popular.

彼は人気者でした

Skin displacement: another big deal.

もうひとつ重要なのが皮膚の動き

The skin had to be absolutely accurate.

ベンジャミンは老人ホームや

He's also in an old age home, he's in a nursing home

特別養護施設など 他の老人たちと演技をするシーンがあるので

around other old people,

彼らと全く同じように見えるため

so he had to look exactly the same as the others.

皮膚の動きは正確でなければなりません

So, lots of work on skin deformation,

ですから皮膚の動きには多くの労力を費やしました

you can see in some of these cases it works,

自然に見えるものもあれば

in some cases it looks bad.

不自然なものもあるでしょう

This is a very, very, very early test in our process.

今お見せしているのはこの過程の初期段階のものです

So, effectively we created a digital puppet

私たちはデジタル人形を作って

that Brad Pitt could operate with his own face.

ブラッドにその顔を操ってもらいました

There were no animators necessary to come in and interpret behavior

行動を解析したり演技を高めたりするアニメーターは

or enhance his performance.

必要ありませんでした

There was something that we encountered, though,

ただ ひとつこれらの過程で対処できないことがありました

that we ended up calling "the digital Botox effect."

「CGによるボトックス注射」というものです

So, as things went through this process,

これらのプロセス通してフィンチャーがいつも言っていたのは

Fincher would always say, "It sandblasts the edges off of the performance."

「デジタル処理で俳優の演技の見せ場が色あせてしまう」ということです

And thing our process and the technology couldn't do,

私たちのプロセスと技術ができなかったのは

is they couldn't understand intent,

意図を理解するということです

the intent of the actor.

俳優の意図することの理解です

So it sees a smile as a smile.

笑顔は笑顔でしかないわけで

It doesn't recognize an ironic smile, or a happy smile,

その笑顔が意味するのは皮肉なのか嬉しさなのか落胆なのか

or a frustrated smile.

判断できないのです

So it did take humans to kind of push it one way or another.

ですからここは人間がある意味機械の道しるべをする必要がありました

But we ended up calling the entire process

けれど最終的にこのプロセスと技術は

and all the technology "emotion capture,"

「エモーション キャプチャー」と呼ばれるまで発達しました

as opposed to just motion capture.

モーションキャプチャーと対になるものです

Take another look.

もうひとつ映像を見てください

Brad Pitt: Well, I heard momma and Tizzy whisper,

ブラッド ピット：ママとティズィーは－

and they said I was gonna die soon,

数年の命と言っていたけど

but ... maybe not.

たぶん違う

EU: That's how to create a digital human in 18 minutes.

18分の「デジタル人間をつくる方法」でした

(Applause)

（拍手）

A couple of quick factoids;

短い説明でしたが

it really took 155 people over two years,

実際には155人が2年以上もこの過程に携わりました

and we didn't even talk about 60 hairstyles and an all-digital haircut.

60ものヘアスタイルとコンピュータ上でのヘアカットのお話はできませんでしたが

But, that is Benjamin. Thank you.

これがベンジャミンです ありがとうございました