Ed Ulbrich: How Benjamin Button got his face

Ed Ulbrich zeigt wie Benjamin Button sein Gesicht bekam

Übersetzung: Marlies Gabriele Prinzl Lektorat: Valentina Wellbrock

I'm here today representing a team of artists and technologists and filmmakers

Ich repräsentiere hier ein Team von Künstlern, Technologen und Filmherstellern,

that worked together on a remarkable film project for the last four years.

das während der letzten vier Jahre an einem bemerkenswerten Filmprojekt zusammen arbeitete.

And along the way they created a breakthrough in computer visualization.

Und während sie das taten, gelang ihnen ein Durchbruch bei der Computer-Visualisierung.

So I want to show you a clip of the film now.

Ich möchten Ihnen gerne einen kurzen Ausschnitt von dem Film zeigen.

Hopefully it won't stutter.

Ich hoffe, er bleibt nicht hängen.

And if we did our jobs well, you won't know that we were even involved.

Wenn wir unsere Arbeit gut getan haben, dann werden Sie nicht einmal merken, das wird etwas damit zu tun hatten.

Voice (Video): I don't know how it's possible ...

Film: Ich weiß nicht wie das möglich ist...

but you seem to have more hair.

aber du scheinst mehr Haare zu haben.

Brad Pitt: What if I told you that I wasn't getting older ...

Benjamin Button: Und wenn ich dir sage, dass ich nicht älter werde...

but I was getting younger than everybody else?

sondern jünger als andere Menschen?

I was born with some form of disease.

Ich wurde mit einer Art von Krankheit geboren.

Voice: What kind of disease?

Stimme: Was für einer Krankheit?

BP: I was born old.

BB: Ich wurde alt geboren.

Man: I'm sorry.

Mann: Das tut mir leid.

BP: No need to be. There's nothing wrong with old age.

BB: Das muss dir nicht leid tun. Es ist nichts schlimmes daran, alt zu sein.

Girl: Are you sick?

Mädchen: Bist du krank?

BP: I heard momma and Tizzy whisper,

BB: Ich hörte wie Momma and Tizzy miteinander flüsterten,

and they said I was gonna die soon.

und sagten, dass ich bald sterben würde.

But ... maybe not.

Aber ... vielleicht nicht.

Girl: You're different than anybody I've ever met.

Mädchen: Du bist anders als die Menschen, die ich kenne.

BB: There were many changes ...

BB: Es gab viele Veränderungen,

some you could see, some you couldn't.

und manche konnte man sehen, andere nicht.

Hair started growing in all sorts of places,

Haare begannen überall zu spriessen,

along with other things.

und andere Sachen auch.

I felt pretty good, considering.

Ich fühlte mich relativ gut.

Ed Ulbrich: That was a clip from "The Curious Case of Benjamin Button."

Ed Ulbrich: Das war ein Ausschnitt von „Der seltsame Fall des Benjamin Button".

Many of you, maybe you've seen it or you've heard of the story,

Viele von Ihnen haben vielleicht den Film gesehen, oder über die Geschichte gehört,

but what you might not know

aber was Sie vielleicht nicht wissen

is that for nearly the first hour of the film,

ist folgendes: während beinahe der gesamten ersten Stunde des Films

the main character, Benjamin Button, who's played by Brad Pitt,

ist das Gesicht von der von Brad Pitt gespielten Hauptfigur, Benjamin Button,

is completely computer-generated from the neck up.

ist vom Hals aufwärts völlig computergeneriert.

Now, there's no use of prosthetic makeup

Es wurde keinerlei prosthetisches Make-up verwendet

or photography of Brad superimposed over another actor's body.

und Fotos von Brad wurden auch nicht über den Körper eines anderen Schauspielers überlagert.

We've created a completely digital human head.

Wir haben einen völlig digitalen, menschlichen Kopf kreiert.

So I'd like to start with a little bit of history on the project.

Ich möchte euch ein wenig von der Geschichte des Projektes erzählen.

This is based on an F. Scott Fitzgerald short story.

Der Film basiert auf einer Kurzgeschichte von F. Scott Fitzgerald

It's about a man who's born old and lives his life in reverse.

und handelt von einem Mann, der alt geboren wird und immer jünger wird.

Now, this movie has floated around Hollywood

Nun, Hollywood ist schon mehr als fünfzig Jahre

for well over half a century,

an dieser Geschichte interessiert.

and we first got involved with the project in the early '90s,

Wir hatten erstmals mit diesem Projekt in den frühen neunziger Jahren zu tun,

with Ron Howard as the director.

mit Ron Howards als Filmregisseur.

We took a lot of meetings and we seriously considered it.

Es gab viele Treffen und wir überlegten ernsthaft uns an den Projekt zu beteiligen,

But at the time we had to throw in the towel.

aber wir mussten die Flinte ins Korn werfen.

It was deemed impossible.

Das Projekt wurde als unmöglich erachtet.

It was beyond the technology of the day to depict a man aging backwards.

Der Stand der Technologie war noch nicht so weit um einen jünger werdenden Mann zu schaffen.

The human form, in particular the human head,

Die menschliche Form, in besonders der menschliche Kopf,

has been considered the Holy Grail of our industry.

werden als Heiliger Gral der Filmindustrie betrachtet.

The project came back to us about a decade later,

Zehn Jahre später kamen wir wieder mit dem Projekt in Kontakt,

and this time with a director named David Fincher.

diesmal mit David Fincher als Filmregisseur.

Now, Fincher is an interesting guy.

Nun, Fincher ist ein interessanter Mann.

David is fearless of technology,

Er ist furchtlos wenn es um Technologie geht,

and he is absolutely tenacious.

und er ist absolut hartnäckig.

And David won't take "no."

„Nein" gilt bei ihm nicht.

And David believed, like we do in the visual effects industry,

Und David war, wie wir in der Visuellen Effekte Industrie, fest davon überzeugt,

that anything is possible

dass alles möglich ist,

as long as you have enough time, resources and, of course, money.

wenn man genug Zeit, Mittel und, natürlich, Geld hat.

And so David had an interesting take on the film,

David hatte also eine interessante Einstellung zu dem Film

and he threw a challenge at us.

und er gab uns eine Herausforderung.

He wanted the main character of the film to be played

Er wollte, dass die Hauptperson im Film von Anfang

from the cradle to the grave by one actor.

bis Ende von demselben Schauspieler gespielt wurde.

It happened to be this guy.

Dem hier.

We went through a process of elimination and a process of discovery

Via einem Eliminationsverfahren und einem Entdeckungsverfahren

with David, and we ruled out, of course, swapping actors.

entschieden wir uns, zusammen mit David, natürlich dagegen Schauspieler zu wechseln.

That was one idea: that we would have different actors,

Das war eine der Möglichkeiten: verschiedene Schauspieler zu verwenden,

and we would hand off from actor to actor.

und von einem Schauspieler zum nächsten zu gehen.

We even ruled out the idea of using makeup.

Wir beschlossen auch kein Make-up zu verwenden,

We realized that prosthetic makeup just wouldn't hold up,

denn wir wurden uns bewusst, dass prothetisches Make-up nicht funktionieren würde,

particularly in close-up.

vor allem nicht bei den Nahaufnahmen.

And makeup is an additive process. You have to build the face up.

Make-Up ist nämlich ein additives Verfahren. Man muss ein Gesicht aufbauen,

And David wanted to carve deeply into Brad's face

und David wollte aber in Brads Gesicht hineinschneiden,

to bring the aging to this character.

um den Altersprozess der Figur zu konstruieren.

He needed to be a very sympathetic character.

Es musste eine sehr sympathische Figur sein.

So we decided to cast a series of little people

Und so beschlossen wir eine Anzahl kleiner Leute zu finden,

that would play the different bodies of Benjamin

welche die verschiedenen Körper von Benjamin

at the different increments of his life

zu seinen verschiedenen Lebenszeiten spielen würden,

and that we would in fact create a computer-generated version of Brad's head,

und eine computergenerierte Version von Brads Kopf zu verwenden,

aged to appear as Benjamin,

diese als Benjamin zu altern,

and attach that to the body of the real actor.

und den Kopf dann am Körper des Schauspielers anzufügen.

Sounded great.

Es hörte sich vielversprechend an.

Of course, this was the Holy Grail of our industry,

Es ging hier natürlich um den Heilige Gral der Filmindustrie,

and the fact that this guy is a global icon didn't help either,

und die Tatsache, das Brad ein Weltstar ist, machte es auch nicht leichter.

because I'm sure if any of you ever stand in line at the grocery store,

Denn ich bin mir sicher, wenn wir bei der Kassa im Lebensmittelladen stehen,

you know -- we see his face constantly.

sehen wir jedes Mal sein Gesicht.

So there really was no tolerable margin of error.

Wir konnten uns also wirklich keinen Fehler erlauben.

There were two studios involved: Warner Brothers and Paramount.

Zwei Filmstudios waren an dem Projekt beteiligt: Warner Brothers und Paramount.

And they both believed this would make an amazing film, of course,

Beide waren überzeugt, dass es ein fantastischer Film werden würde,

but it was a very high-risk proposition.

aber es war ein äußerst riskantes Vorhaben.

There was lots of money and reputations at stake.

Es stand viel auf den Spiel - Geld, Ansehen -

But we believed that we had a very solid methodology

und wir dachten, dass wir eine solide Arbeitstechnik gefunden hatten,

that might work ...

die vielleicht funktionieren würde...

But despite our verbal assurances,

Aber trotz unserer mündlichen Versprechen,

they wanted some proof.

wollten die Studios einen handfesten Nachweis von uns.

And so, in 2004, they commissioned us to do a screen test of Benjamin.

Und so wurde wir in 2004 beauftragt Probeaufnahmen von Benjamin zu machen.

And we did it in about five weeks.

Das gelang uns in etwa fünf Wochen.

But we used lots of cheats and shortcuts.

Aber wir schummelten und verwendeten dabei allerlei Tricks,

We basically put something together to get through the meeting.

einfach um etwas für das Meeting zu haben.

I'll roll that for you now. This was the first test for Benjamin Button.

Ich werde es Ihnen jetzt zeigen. Das war die erste Probeaufnahme für Benjamin Button.

And in here, you can see, that's a computer-generated head --

Was Sie hier sehen ist ein computergenerierter Kopf.

pretty good -- attached to the body of an actor.

Er ist ziemlich gut. Er ist am Körper eines Schauspielers angefügt.

And it worked. And it gave the studio great relief.

Und es funktionierte. Das Studio war sehr erleichtert.

After many years of starts and stops on this project,

Das Projekt wurde über viele Jahre hin gestartet und dann wieder gestoppt,

and making that tough decision,

und es gab viele schwierige Entschlüsse,

they finally decided to greenlight the movie.

aber nun gaben sie endlich grünes Licht für den Film.

And I can remember, actually, when I got the phone call to congratulate us,

Und ich erinnere mich daran, als sie mich anriefen um zu gratulieren,

to say the movie was a go,

um uns mitzuteilen, dass das Projekt laufen würden,

I actually threw up.

und ich musste brechen.

(Laughter)

(Gelächter)

You know, this is some tough stuff.

Wissen Sie, all das ist gar nicht so einfach.

So we started to have early team meetings,

Also begannen wir frühe Teammeetings zu halten,

and we got everybody together,

und wir brachten alle zusammen.

and it was really more like therapy in the beginning,

Es war mehr wie Therapie am Anfang,

convincing each other and reassuring each other that we could actually undertake this.

um einander zu überzeugen und versichern, dass wir es tatsächlich schaffen könnten.

We had to hold up an hour of a movie with a character.

Wir mussten eine Stunde des Filmes mit einer Figur füllen.

And it's not a special effects film; it has to be a man.

Und es war kein Spezialeffektfilm, es musste ein Mann sein.

We really felt like we were in a -- kind of a 12-step program.

Wir dachten, dass wir in einer Art 12-Stufen Program waren.

And of course, the first step is: admit you've got a problem. (Laughter)

Und die erste Stufe ist natürlich anzuerkennen, dass man ein Problem hat.

So we had a big problem:

Und wir hatten ein großes Problem.

we didn't know how we were going to do this.

Wir wussten nicht, wie wir dies zustande bringen würden.

But we did know one thing.

Aber eines wussten wir:

Being from the visual effects industry,

Da wir von der Visuellen Effekte Industrie waren,

we, with David, believed that we now had enough time,

wussten wir, zusammen mit David, dass wir nun genügend Zeit,

enough resources, and, God, we hoped we had enough money.

genügend Mittel, und, hoffentlich, genügend Geld hatten.

And we had enough passion to will the processes and technology into existence.

Und wir hatten ausreichend Leidenschaft um die Arbeitsverfahren und Technologie zu verwirklichen.

So, when you're faced with something like that,

Wenn man mit so einem Problem zu tun hat,

of course you've got to break it down.

dann muss man es natürlich in kleine Bestandteile zerbrechen.

You take the big problem and you break it down into smaller pieces

Man nimmt das große Problem und zerteilt es in kleinere Bestandteile

and you start to attack that.

und attackiert diese.

So we had three main areas that we had to focus on.

Wir hatten drei Hauptbereiche auf die wir uns konzentrieren mussten.

We needed to make Brad look a lot older --

Brad musste viel älter ausschauen

needed to age him 45 years or so.

- wir mussten ihn 45 Jahre altern lassen.

And we also needed to make sure that we could take Brad's idiosyncrasies,

Und wir mussten uns sicher sein, dass Brads Eigenheiten,

his little tics, the little subtleties that make him who he is

seine speziellen Macken und Feinheiten, die ihn machen, wer er ist,

and have that translate through our process

in dem Prozess erhalten bleiben würden,

so that it appears in Benjamin on the screen.

so dass sie im digitalen Benjamin aufscheinen würden.

And we also needed to create a character

Wir mussten auch eine Figur kreieren,

that could hold up under, really, all conditions.

die in allen Situationen funktionieren konnte.

He needed to be able to walk in broad daylight,

Er musste am hellichten Tag herumspazieren können,

at nighttime, under candlelight,

und bei Nacht und im Kerzenlicht.

he had to hold an extreme close-up,

Nahaufnahmen mussten möglich sein,

he had to deliver dialogue,

und er musste Gespräche führen,

he had to be able to run, he had to be able to sweat,

er musste laufen, er musste schwitzen,

he had to be able to take a bath, to cry,

er musste ein Bad nehmen können, weinen,

he even had to throw up.

und sogar sich übergeben.

Not all at the same time --

Natürlich nicht alles gleichzeitig,

but he had to, you know, do all of those things.

aber er musste zu all diesem fähig sein.

And the work had to hold up for almost the first hour of the movie.

Und das für beinahe die gesamte erste Stunde des Films

We did about 325 shots.

Wir machten etwa 325 Aufnahmen.

So we needed a system that would allow Benjamin

Wir hatten ein System nötig, das Benjamin ermöglichen würde

to do everything a human being can do.

alles zu tun, was ein echter Mensch auf tut.

And we realized that there was a giant chasm

Wir wurden uns bewusst, dass es einige riesige Kluft

between the state of the art of technology in 2004

zwischen dem Stand der Technologie im Jahre 2004

and where we needed it to be.

und dem, was wir nötig hatten, gab.

So we focused on motion capture.

Wir konzentrierten uns also auf Motion Capture, Bewegungserfassung.

I'm sure many of you have seen motion capture.

Ich bin sicher, viele von euch haben Motion Capture gesehen.

The state of the art at the time

Der Stand der Technik zu jener Zeit

was something called marker-based motion capture.

war auf Marker basierte Bewegungserfassung.

I'll give you an example here.

Hier ist ein Beispiel:

It's basically the idea of, you wear a leotard,

Die Idee ist, dass man einen Anzug anhat,

and they put some reflective markers on your body,

auf dem reflektierende Marker angebracht werden

and instead of using cameras,

und anstatt von Kameras

there're infrared sensors around a volume,

werden Infrarotsensoren verwendet,

and those infrared sensors track the three-dimensional position

die dann die dreidimensionellen Positionen

of those markers in real time.

dieser Marker auf längere Zeit registrieren.

And then animators can take the data of the motion of those markers

Und die Computer-Animateure verwenden die Daten dieser Marker

and apply them to a computer-generated character.

für die computergenerierte Figur.

You can see the computer characters on the right

Sie können sehen, dass die Computerfiguren rechts

are having the same complex motion as the dancers.

diesselben, komplexen Bewegungen wie die Tänzer haben.

But we also looked at numbers of other films at the time

Aber wir haben uns auch einige Filme angeschaut,

that were using facial marker tracking,

die Gesichtsmarker-Tracking verwendeten.

and that's the idea of putting markers on the human face

Dabei werden Marker auf das menschliche Gesicht plaziert

and doing the same process.

und der Prozess ist derselbe wie bei Motion Capture.

And as you can see, it gives you a pretty crappy performance.

Und wie Sie sehen, die Ergebnisse sind nicht sonderlich gut.

That's not terribly compelling.

Nein, sie sind nicht besonders überzeugend.

And what we realized

Und es wurde uns klar,

was that what we needed

dass was wir brauchten,

was the information that was going on between the markers.

war das, was in den Bereichen zwischen den Markern passierte.

We needed the subtleties of the skin.

Wir brauchten Daten über die Feinheiten der Haut,

We needed to see skin moving over muscle moving over bone.

wie Haut sich über einem Muskel bewegt, unter dem ein Knochen ist.

We needed creases and dimples and wrinkles and all of those things.

Wir brauchten Daten über zerknitterte Haut, Grübchen, Falten, usw.

Our first revelation was to completely abort and walk away from

Uns wurde deutlich, dass wir uns von dem Stand der Technik

the technology of the day, the status quo, the state of the art.

jener Zeit, von der aktuellen Technik abwenden mussten.

So we aborted using motion capture.

Uns so verabschiedeten wir uns von Motion Capture,

And we were now well out of our comfort zone,

von dem was uns bekannt und angenehm war,

and in uncharted territory.

und betraten absolutes Neuland.

So we were left with this idea

Wir hatten diese Idee,

that we ended up calling "technology stew."

die wir letztendlich als „Technologieeintopf" bezeichneten.

We started to look out in other fields.

Wir begannen in anderen Bereichen zu recherchieren,

The idea was that we were going to find

mit dem Gedanken, dass wir etwas entdecken würden,

nuggets or gems of technology

besondere Technologieverfahren,

that come from other industries like medical imaging,

die in anderen Bereichen, wie z.B. in bildgebender Diagnostik,

the video game space,

oder bei Videospielen, verwendet wurden,

and re-appropriate them.

um diese für unsere Zwecke uns anzueignen.

And we had to create kind of a sauce.

Und wir mussten eine Art Mischmasch kreieren,

And the sauce was code in software

einen Programmierungscode,

that we'd written to allow these disparate pieces of technology

den wir geschrieben hatten um diese unterschiedlichen, technischen Bestandteile

to come together and work as one.

zu kombinieren und zusammen funktionieren zu lassen.

Initially, we came across some remarkable research

Ganz am Anfang entdecken wir die außerordentlichen Forschungsarbeiten

done by a gentleman named Dr. Paul Ekman in the early '70s.

von Dr. Paul Ekman, die aus den siebziger Jahren stammten.

He believed that he could, in fact,

Dr. Ekman war davon überzeugt,

catalog the human face.

dass er tatsächlich das menschliche Gesicht katalogisieren konnte.

And he came up with this idea of Facial Action Coding System, or FACS.

Und seine Idee war das „Facial Action Coding System" ("Gesichtsbewegungskodierungssystem"), kurz FACS.

He believed that there were 70 basic poses

Er glaubte, dass es 70 grundlegende Posen

or shapes of the human face,

oder Gesichtsausprägungen gab

and that those basic poses or shapes of the face

und dass man die grundlegenden Posen oder Prägungen des Gesichts

can be combined to create infinite possibilities

kombinieren konnte um die unendlich vielen

of everything the human face is capable of doing.

menschlichen Gesichtszüge zu formen.

And of course, these transcend age, race, culture, gender.

Diese sind natürlich von Alter, Rasse, Kultur und Geschlecht eines Menschen unabhängig.

So this became the foundation of our research as we went forward.

Diese Idee wurde dann zur Grundlage unserer eigenen Recherchen.

And then we came across some remarkable technology

Wir entdeckten eine äußerst bemerktenswerte Technologie

called Contour.

namens Contour (Kontur).

And here you can see a subject having phosphorus makeup

Hier ist ein Bild von einen Testsubjekt das Phospor-Makeup

stippled on her face.

auf ihr Gesicht getüpfelt hat.

And now what we're looking at is really creating a surface capture

Was wir hierbei anstreben, ist eine Erfassung der gesamten Oberfläche,

as opposed to a marker capture.

und nicht nur eine Erfassung der Marker.

The subject stands in front of a computer array of cameras,

Diese Testperson steht vor einer Anzahl von Kameras

and those cameras can, frame-by-frame,

und mit diesen Kameras kann man, Bild für Bild,

reconstruct the geometry of exactly what the subject's doing at the moment.

die Geometrie von dem rekonstruieren, was die Person in jenem Moment tut.

So, effectively, you get 3D data in real time of the subject.

Man erhält also 3D-Daten in der Echtzeit des Subjektes.

And if you look in a comparison,

Sie können das auch im Vergleich sehen:

on the left, we see what volumetric data gives us

links, die Auswertungen dieser volumetrischen Daten

and on the right you see what markers give us.

und rechts, die Daten von den Markern.

So, clearly, we were in a substantially better place for this.

Die Ergebnissen waren also schon wesentlich besser,

But these were the early days of this technology,

aber wir standen noch ganz am Anfang dieser Technologie,

and it wasn't really proven yet.

und nichts war noch bewiesen.

We measure complexity and fidelity of data

Wir messen die Schwierigkeit und Genauigkeit der Daten

in terms of polygonal count.

durch die Anzahl von Vielecken.

And so, on the left, we were seeing 100,000 polygons.

Auf der linken Seite können wir 100000 Vielecke sehen,

We could go up into the millions of polygons.

Wir könnten Millionen von Vielecken haben,

It seemed to be infinite.

die Anzahl schien unendlich zu sein.

This was when we had our "Aha!"

Das war unser „Aha" Ereignis.

This was the breakthrough.

Das war der Durchbruch.

This is when we're like, "OK, we're going to be OK,

Es war in diesem Moment, in dem wir uns klar wurden,

This is actually going to work."

dass es tatsächlich funktionieren würde.

And the "Aha!" was, what if we could take Brad Pitt,

Und unser Heureka war folgendes: wenn wir mit Brad Pitt arbeiteten,

and we could put Brad in this device,

und bei Brad

and use this Contour process,

diesen Contourprozess anwenden konnten,

and we could stipple on this phosphorescent makeup

das posphorezierende Makeup auftragen konnten,

and put him under the black lights,

und in schwarzes Licht stellen konnten,

and we could, in fact, scan him in real time

und ihn so, in Echtzeit, einscannen konnten

performing Ekman's FACS poses.

während er Ekmans FACS-Posen darstellte.

Right? So, effectively,

Im Endeffekt

we ended up with a 3D database

bauten wir ein 3D-Datenbank mit Daten

of everything Brad Pitt's face is capable of doing.

über alles, zu dem Brad Pitts Gesicht fähig war, auf.

(Laughter)

(Gelächter)

From there, we actually carved up those faces

Und dann haben wir diese Gesichter

into smaller pieces and components of his face.

in kleinere Bestandteile und Komponente zerstückelt.

So we ended up with literally thousands and thousands and thousands of shapes,

Schlussendlich hatten wir dann zigtausende Gesichtsausdrücke,

a complete database of all possibilities

eine fast lückenlose Datenbank von Möglichkeiten,

that his face is capable of doing.

von allem zu dem Brads Gesicht fähig war.

Now, that's great, except we had him at age 44.

Das war fantastisch - nur waren das Gesichtmöglichlichkeiten eines 44-jährigen.

We need to put another 40 years on him at this point.

Und wir mussten ihn aber 40 Jahre altern lassen.

We brought in Rick Baker,

Also haben wir Rick Baker kontaktiert.

and Rick is one of the great makeup and special effects gurus

Rick ist einer der besten Makeup- and Spezialeffektgurus

of our industry.

in der Filmindustrie.

And we also brought in a gentleman named Kazu Tsuji,

Und wir setzten uns auch mit Kazu Tsuji in Kontakt,

and Kazu Tsuji is one of the great photorealist sculptors of our time.

einer der besten photorealistischen Bildhauer unserer Zeit.

And we commissioned them to make a maquette,

Wir beauftragten die beiden einen Modell zu machen,

or a bust, of Benjamin.

eine Büste von Benjamin.

So, in the spirit of "The Great Unveiling" -- I had to do this --

Im Sinne der "großen Enthüllung" - denn das musste sein -

I had to unveil something.

ich musste etwas enthüllen.

So this is Ben 80.

Das ist Ben im Alter von 80, Ben 80.

We created three of these:

Wir hatten drei solche Modelle:

there's Ben 80, there's Ben 70, there's Ben 60.

Ben 80, Ben 70 und Ben 60.

And this really became the template for moving forward.

Und dies wurde dann wirklich unsere Vorlage um voranzukommen.

Now, this was made from a life cast of Brad.

Und es wurde von einem echten Abdruck von Brad gemacht,

So, in fact, anatomically, it is correct.

und ist tatsächlich, anatomisch gesehen, korrekt.

The eyes, the jaw, the teeth:

Die Augen, das Kinn, die Zähne...

everything is in perfect alignment with what the real guy has.

alles ist genau abgestimmt, alles passt zu dem echten Menschen.

We have these maquettes scanned into the computer

Diese Maquetten wurden dann in den Computer

at very high resolution --

mit einer äußerst großen Auflösung eingescannt.

enormous polygonal count.

Eine enorme Anzahl von Vielecken.

And so now we had three age increments of Benjamin

Wir hatten also bereits drei verschiedenen Alterstufen von Benjamin

in the computer.

im Computer eingespeichert.

But we needed to get a database of him doing more than that.

Aber die Datenbank mußte noch zu mehr fähig sein.

We went through this process, then, called retargeting.

Wir haben dafür den sogenannten „Retargeting" Arbeitsprozess verwendet.

This is Brad doing one of the Ekman FACS poses.

Hier ist Brad in einer der Ekman-FACS-Posen zu sehen.

And here's the resulting data that comes from that,

Und das sind die Daten dir wir davon bekommen,

the model that comes from that.

und die dann für das Modell verwendet werden.

Retargeting is the process of transposing that data

Retargeting ist ein Vorgang bei dem man Daten

onto another model.

in ein anderes Modell umsetzt.

And because the life cast, or the bust -- the maquette -- of Benjamin

Und weil der Gipsabdruck, die Büste von Benjamin,

was made from Brad,

von Brad gemacht wurde,

we could transpose the data of Brad at 44

konnten wir die Daten von Brad im Alter von 44 Jahren

onto Brad at 87.

auf Brad im Alter von 87 übertragen.

So now, we had a 3D database of everything Brad Pitt's face can do

Und so hatten wir eine 3D-Datenbank von sämtlichen Gesichtsausdrücken, zu denen Brad fähig war

at age 87, in his 70s and in his 60s.

im Alter von 87 Jahren, und um die 70 und 60 Jahre herum.

Next we had to go into the shooting process.

Wir mussten nun auch mit dem Filmen anfangen.

So while all that's going on,

Dass heisst, während wir mit all dem beschäftigt waren,

we're down in New Orleans and locations around the world.

waren wir gleichzeitig auch in New Orleans und an anderen Filmplätzen weltweit.

And we shot our body actors,

Wir filmten unsere Körperschauspieler

and we shot them wearing blue hoods.

mit blauen Kapuzen auf den Köpfen.

So these are the gentleman who played Benjamin.

Dieser Herr hier spielte Benjamin.

And the blue hoods helped us with two things:

Die blauen Kapuzen halfen uns auf zwei Arten:

one, we could easily erase their heads;

erstens war es dann ganz einfach die Köpfe wegzuradieren.

and we also put tracking markers on their heads

Der zweite Grund war, dass wir Marker auf den Köpfen plazieren konnten

so we could recreate the camera motion

um so die Kamerabewegungen

and the lens optics from the set.

und die Optik der Linsen auf den Set nachzuahmen.

But now we needed to get Brad's performance to drive our virtual Benjamin.

Aber Brads schauspielerische Vorstellung musste dann unseren virtuellen Benjamin leiten.

And so we edited the footage that was shot on location

Wir bearbeiteten das Filmmaterial welches wir von

with the rest of the cast and the body actors

der Filmbesetzung und den Körperschauspielern hatten,

and about six months later

und, etwa sechs Monate später,

we brought Brad onto a sound stage in Los Angeles

kam Brad ins Tonstudio in Los Angeles

and he watched on the screen.

und sah sich dieses Material an.

His job, then, was to become Benjamin.

Seine Aufgabe war Benjamin zu werden.

And so we looped the scenes.

Wir haben die Szenen in eine Wiederholungsschleife gesetzt,

He watched again and again.

und er schaute sie sich immer und immer wieder an.

We encouraged him to improvise.

Wir haben ihn dabei ermuntert zu improvisieren

And he took Benjamin into interesting and unusual places

und er machte mit Benjamin interessante und ungewöhnliche Sachen,

that we didn't think he was going to go.

die wir überhaupt nicht erwarteten.

We shot him with four HD cameras

Wir haben das ganze mit vier HD-Kameras gefilmt

so we'd get multiple views of him

um verschiedene Blickwinkel zu bekommen.

and then David would choose the take of Brad being Benjamin

David konnte dann den Blickwinkel von Brad als Benjamin auswählen,

that he thought best matched the footage

der laut ihm am besten zu dem Filmmaterial

with the rest of the cast.

von der restlichen Besetzung passte.

From there we went into a process called image analysis.

Der nächste Schritt war dann die Bildanalyse.

And so here, you can see again, the chosen take.

Hier kann man den ausgewählten Take sehen

And you are seeing, now, that data being transposed on to Ben 87.

und wie die Daten auf den 87-jährigen Ben umgesetzt werden.

And so, what's interesting about this is

Und was an dem ganzen interessant ist,

we used something called image analysis,

ist das wir dabei den Bildanalyse-Prozess verwendten.

which is taking timings from different components of Benjamin's face.

Man macht dabei Zeitabschnitte von Benjamins unterschiedlichen Gesichtskomponenten.

And so we could choose, say, his left eyebrow.

Ein Beispiel: seine linke Augenbraue.

And the software would tell us that, well,

Das Computerprogramm verriet uns,

in frame 14 the left eyebrow begins to move from here to here,

dass die linke Augenbraue sich im Bildrahmen Nr. 14 zu bewegen beginnt,

and it concludes moving in frame 32.

und die Bewegung dann im Bildrahmen 32 aufhört.

And so we could choose numbers of positions on the face

Wir konnten also Nummern für die Gesichtspositionen auswählen

to pull that data from.

um deren Daten zu erfassen.

And then, the sauce I talked about with our technology stew --

Und das Geheimrezept für den eher erwähnten „Technologieeintopf",

that secret sauce was, effectively, software that allowed us to

das Geheimrezept war im Prinzip die Software, die uns erlaubte

match the performance footage of Brad

das Filmmaterial von Brad, seine Darbietungen,

in live action with our database of aged Benjamin,

mit dem Material von dem gealterten Benjamin, den FACS,

the FACS shapes that we had.

in unserer Datenbank zu kombinieren.

On a frame-by-frame basis,

Bild für Bild

we could actually reconstruct a 3D head

konnten wir tatsächlich einen dreidimensional Kopf konstruieren,

that exactly matched the performance of Brad.

der genau der Darbietung von Brad entsprach.

So this was how the finished shot appeared in the film.

Und so sah das fertige Bild aus, dass im Film verwendet wurde.

And here you can see the body actor.

Man sieht hier den Körperschauspieler,

And then this is what we called the "dead head," no reference to Jerry Garcia.

und dies ist der „dead head", der „tote Kopf" (ohne sich auf Jerry Garcia zu beziehen).

And then here's the reconstructed performance

Und dann ist hier noch die rekonstruierte Darbietung

now with the timings of the performance.

mit den Zeiteinstellungen der Darbietung.

And then, again, the final shot.

Und das schlußendliche Bild.

It was a long process.

Es war ein langer Prozess.

(Applause)

(Applaus)

The next section here, I'm going to just blast through this,

Das nächste Thema werde ich in Windeile behandeln,

because we could do a whole TEDTalk on the next several slides.

denn wir könnten einen gesamten TED-Vortrag über die nächsten Folien halten.

We had to create a lighting system.

Wir mussten ein Lichtsystem kreieren.

So really, a big part of our processes was creating a lighting environment

Einer unserer wichtigsten Aufgaben war es ein Lichtumfeld

for every single location that Benjamin had to appear

für jeden einzelnen Moment zu schaffen, an dem Benjamin auftauchen musste,

so that we could put Ben's head into any scene

damit wir seinen Kopf in jede Szene stecken konnten

and it would exactly match the lighting that's on the other actors

und dies genau dem Licht, das auf den anderen Schauspielern

in the real world.

in der echten Welt lag, entsprach.

We also had to create an eye system.

Wir mussten auch ein Augensystem kreieren.

We found the old adage, you know,

Wir fanden, dass das alte Sprichwort,

"The eyes are the window to the soul,"

„Die Augen sind das Fenster zur Seele"

absolutely true.

der Wahrheit entsprach.

So the key here was to keep everybody looking in Ben's eyes.

Das entscheidende war daher, dass die Leute, die den Film sehen, fortwährend in Bens Augen schauen.

And if you could feel the warmth, and feel the humanity,

Denn wenn sie die Wärme und die Menschlichkeit,

and feel his intent coming through the eyes,

und seine Absichten über die Augen spüren konnten

then we would succeed.

- dann würden wir unser Ziel erreicht haben.

So we had one person focused on the eye system

Wir hatten einen Mitarbeiter der an dem Augensystem

for almost two full years.

fast zwei Jahre lang arbeitete.

We also had to create a mouth system.

Wir mussten auch ein Mundsystem kreieren.

We worked from dental molds of Brad.

Wir verwendeten dazu Zahnabdrücke von Brad.

We had to age the teeth over time.

Wir mussten die Zähne mit der Zeit älter werden lassen

We also had to create an articulating tongue that allowed him to enunciate his words.

und auch eine artikulierende Zunge kreieren, die eine deutliche Ausprache ermöglichte.

There was a whole system written in software to articulate the tongue.

Wir schrieben ein eigenes Softwareprogramm für die Artikulationen der Zunge.

We had one person devoted to the tongue for about nine months.

Jemand arbeitete etwa neun Monate an der Zunge.

He was very popular.

Er war äußerst beliebt.

Skin displacement: another big deal.

Hautveränderungen waren auch extrem wichtig.

The skin had to be absolutely accurate.

Die Haut musste perfekt gemacht sein,

He's also in an old age home, he's in a nursing home

denn Benjamin ist in einem Altersheim, einem Pflegeheim

around other old people,

mit anderen alten Menschen

so he had to look exactly the same as the others.

und er musste genau wie die anderen ausschauen.

So, lots of work on skin deformation,

Also war viel Arbeit an der Hautveränderung notwendig.

you can see in some of these cases it works,

In einigen dieser Beispiele schaut es gut aus,

in some cases it looks bad.

in anderen ist es nicht sehr überzeugend -

This is a very, very, very early test in our process.

das war eine sehr, sehr, sehr frühe Probe.

So, effectively we created a digital puppet

Wir stellten im Prinzip eine digitale Marionette her,

that Brad Pitt could operate with his own face.

die Brad Pitt mithilfe seines eigenes Gesichtes betätigen konnte.

There were no animators necessary to come in and interpret behavior

Wir brauchten keine Trickzeichner, die sein Verhalten interpretieren,

or enhance his performance.

oder seine Darbietungen verbessern mussten.

There was something that we encountered, though,

Aber wir entdeckten ein Problem dabei,

that we ended up calling "the digital Botox effect."

das wir schlussendlich den „digitalen Botox-Effekt" nannten.

So, as things went through this process,

Und während unserer Arbeit

Fincher would always say, "It sandblasts the edges off of the performance."

meinte Fincher immer, dass so die Feinheiten der Darbietung abgesandet wurden.

And thing our process and the technology couldn't do,

Denn etwas, was unser Arbeitsvorgang und Technologie nicht konnten,

is they couldn't understand intent,

war es die Absichten,

the intent of the actor.

die Intentionen des Schauspielers zu verstehen.

So it sees a smile as a smile.

Ein Lächeln ist ein Lächeln -

It doesn't recognize an ironic smile, or a happy smile,

Technologie macht keinen Unterschied zwischen einem spöttischen, einem fröhlichen,

or a frustrated smile.

oder einem frustrierten Lächeln.

So it did take humans to kind of push it one way or another.

Man braucht einen echten Menschen um das zu bewirken.

But we ended up calling the entire process

Wir nannten diese Vorgangsweise

and all the technology "emotion capture,"

und die damit verbundene Technologie „emotion capture" (Gefühlserfassung),

as opposed to just motion capture.

anstatt nur „motion capture".

Take another look.

Schauen Sie sich dies noch einmal an.

Brad Pitt: Well, I heard momma and Tizzy whisper,

Brad Pitt: Ich hörte wie Momma and Tizzy miteinander flüsterten,

and they said I was gonna die soon,

und sagten, dass ich bald sterben würde.

but ... maybe not.

Aber... vielleicht nicht.

EU: That's how to create a digital human in 18 minutes.

Ed Ulbrich: Und so kreiert man einen digitalen Mensch in 18 Minuten.

(Applause)

(Applaus)

A couple of quick factoids;

Noch einige schnelle Fakten:

it really took 155 people over two years,

Tatsächlich brauchten 155 Personen zwei Jahre lang

and we didn't even talk about 60 hairstyles and an all-digital haircut.

und dabei haben wir die 60 Frisuren und den völlig digitalen Haarschnitt noch gar nicht erwähnt.

But, that is Benjamin. Thank you.

Aber, dies ist Benjamin. Danke für Ihre Aufmerksamkeit.