How volumetric video brings a new dimension to filmmaking | Diego Prilusky

Traducteur: Emily Hinz Relecteur: Jules Daunay

I love making movies.

J'adore faire des films.

Motion pictures have been in existence for more than a hundred years.

Le cinéma existe depuis plus de cent ans.

Filmmaking hasn't changed for the dimensional mindset.

La réalisation de films n'a pas changé pour ce qui est du concept dimensionnel.

C'est toujours placer la caméra dans une scène et appuyer sur « enregistrer ».

Placing the camera in a scene and pressing "record" hasn't changed.

Filmmaking is still a frontal experience,

La réalisation d'un film reste une expérience frontale,

and creating the film has the possibility

et la création du film ne peut que

to follow the same direction of the content creation.

suivre la même direction que la création du contenu.

We still stand in front of a flat image,

Nous sommes toujours devant une image plate

watching the fiction.

quand nous regardons une fiction.

There's nothing wrong with it.

Il n'y a rien mal à cela.

I love watching movies and going to the theaters.

J'adore regarder des films et aller au cinéma.

The experiences can be such emotional experiences.

Ces expériences peuvent être très émotionnelles.

The art and craft of emotional experiences within a frame

L'art et l’artisanat de la fabrique d'émotions dans un cadre

can be so strong to drive a stronger emotion.

peuvent être si forts qu'ils suscitent une émotion encore plus grande.

The question we're asking is,

La question que nous nous posons est la suivante :

How the experience of motion pictures can exist beyond the flat screen.

Comment l'expérience du cinéma peut-elle exister au-delà d’un écran plat ?

How can we start creating content

Comment commencer à créer du contenu

for the next generation of content experiences?

pour la prochaine génération d’expériences du contenu ?

Traditionally, when we imagine a scene,

Traditionnellement, quand on imagine une scène,

we look at the frame and the composition.

on regarde le cadre et la composition.

We have to think about how we create depth and parallax

Il faut réfléchir à la façon dont on crée la profondeur et la parallaxe

using foreground, background elements as the camera moves.

en utilisant des éléments de premier plan et d'arrière-plan

lorsque la caméra se déplace.

With the technology today and devices of VR glasses,

Avec la technologie et les systèmes de casques de réalité virtuelle,

AR glasses, smart devices,

de casques de réalité augmentée, les dispositifs intelligents,

allowing three-dimensional and full navigation in space,

permettant une navigation tridimensionnelle et complète

dans l'espace,

we have the possibility to enable audiences

nous avons la possibilité d'offrir au public

to experience content from multiple perspectives.

de vivre le contenu à partir de perspectives multiples.

What we have to think about is how we take this technology,

Ce à quoi nous devons réfléchir,

c'est à la manière d'utiliser cette technologie,

all the capabilities,

toutes ses capacités,

and enable the experience to move farther away inside the scene.

pour permettre à l'expérience de s'éloigner de la scène.

Now we're not talking about video games or computer-generated actors,

Nous ne parlons ni de jeux vidéo ni d'acteurs générés par ordinateur,

which look tremendously realistic.

qui ont l'air extrêmement réalistes.

We're talking about real actors and real performance,

Nous parlons de vrais acteurs et d'une vraie interprétation

performing onstage.

qui se produisent sur une scène.

We have to start thinking how we capture the actors

Nous devons commencer à réfléchir à la façon dont nous filmons les acteurs

and how we capture the real scene

et à la façon dont nous filmons une scène réelle

in order to immerse inside.

afin de nous immerger dedans.

Now, we're familiar with the 360-degree video,

Nous connaissons bien la vidéo à 360 degrés,

where you place a camera inside the scene

où on place une caméra à l'intérieur de la scène

and you can create this beautiful panoramic image all around you,

et à créer cette belle image panoramique tout autour du spectateur,

but from the same aspect,

mais sous le même aspect,

filmmaking is still frontal.

la réalisation du film est toujours frontale.

In order to emerge fully inside the scene,

Pour immerger pleinement le spectateur dans la scène,

we will need to capture the light from all the possible directions.

nous devons saisir la lumière à partir de toutes les directions possibles.

We will have to surround the scene with an enormous amount of sensors,

Nous devons entourer la scène d'une énorme quantité de capteurs,

with all possible capabilities to capture the light

dotés de toutes les capacités possibles pour capter la lumière

and enable us to emerge inside afterwards again.

afin de nous permettre de nous y immerger ensuite de nouveau.

Now, in this setup,

Dans cette configuration,

there's no more foreground or background

il n'y a plus de premier plan, d'arrière-plan

or a camera placed in space

ou de caméra placée dans l'espace,

but hundreds of sensors capturing the light

mais des centaines de capteurs qui captent la lumière

and capturing the motion from all the possible directions.

et filment le mouvement depuis toutes les directions possibles.

With the new technological advancements,

Grâce aux nouvelles avancées technologiques,

we can start looking at 3D photography,

on peut commencer à envisager la photographie en 3D,

capturing the light from multiple perspectives,

capter la lumière sous de multiples perspectives,

enabling us to reconstruct the object.

ce qui nous permet de reconstruire l'objet.

This is like photography in 3D space.

C'est comme une photographie dans l'espace en 3D.

Now, with these technological advancements,

Grâce à ces avancées technologiques,

we can record video not just as a flat image

nous pouvons enregistrer des vidéos non seulement comme une image plate

but as a volume.

mais aussi comme un volume.

This is what we call "volumetric video,"

C'est ce que nous appelons la « vidéo volumétrique »

and it has the capability to record every action of the scene

et elle a la capacité d'enregistrer chaque action de la scène

as a full three-dimensional volume.

comme un volume tridimensionnel complet.

Now, what is a voxel?

Alors, c’est quoi un voxel ?

A voxel is like a three-dimensional pixel,

Un voxel, c’est comme un pixel tridimensionnel,

but instead of being a flat image square, staying light and colored,

mais au lieu d'être un carré d'image plat, restant allumé et coloré,

it's like a three-dimensional cube in space,

c'est comme un cube tridimensionnel dans l'espace,

with x, y, and z positions.

avec des positions x, y et z.

Cela nous permet de créer une prise de vue complète de la scène

This enables us to create a full capture of the scene

from any perspective.

à partir de n'importe quelle perspective.

Now this renders a fully light-immersive scene

Cela permet de rendre une scène entièrement immergée dans la lumière,

from multiple perspectives.

à partir de perspectives multiples.

This capability requires an insane amount of information to be processed.

Cette capacité exige le traitement d'une quantité immense d'informations.

We will have to capture the light from an enormous amount of cameras

Nous devons capter la lumière grâce à un grand nombre de caméras

to create this information.

pour créer cette information.

Now, in order to do such a thing,

Pour réaliser cela,

we would need a setup that would host a numerous amount of cameras

il nous faudrait une installation qui accueillerait un grand nombre de caméras

installed in a stage

installées sur une scène suffisamment grande

and a stage big enough in order to fit a full cinematic experience.

pour permettre une expérience cinématographique complète.

Now that sounds like a crazy idea, but that's exactly what we did.

Cela peut vous sembler fou, mais c'est exactement ce que nous avons fait.

For the last three years,

Depuis trois ans,

we have been building a huge volumetric camera chamber.

nous construisons un immense plateau muni de caméras volumétriques.

It's 10,000 square feet of a stage,

C’est une scène de 930 mètres carrés

enabling to capture the action from any location.

où il est possible de filmer l'action depuis n'importe quel endroit.

We have deployed hundreds of cameras,

Nous avons déployé des centaines de caméras,

sending a tremendous amount of information

qui ont envoyé une immense quantité d'informations

to a huge data center powered by Intel supercomputers.

à un énorme centre de données basé sur des supercalculateurs d'Intel.

The ability to have this 10,000 feet

La capacité à disposer de ces 930 mètres carrés

enables us to fit any kind of action,

nous permet de nous adapter à n’importe quel type d’action,

any kind of performance.

à n’importe quel type de représentation.

It is the size of an average Broadway stage.

C'est la dimension moyenne d'une scène à Broadway.

We call it Intel Studios,

Nous l'appelons Intel Studios

and it's the largest volumetric stage in the world,

et c'est la plus grande scène volumétrique du monde.

with the objective of enabling and exploring

Son but de lancer la prochaine génération de ce cinéma immersif et de la découvrir.

the next generation of this immersive media filmmaking.

Now, to test these ideas,

Pour tester ces idées,

we were thinking about what we can do as the first scene to try it out.

nous réfléchissions à ce que nous pouvions faire

comme première scène pour l'essayer.

So we chose the Western scene.

Nous avons donc choisi une scène de western.

We brought horses, set designers, dirt,

Nous avons apporté des chevaux, des décorateurs, de la terre,

everything needed to create the full scene of a Western.

tout ce qu'il fallait pour créer une vraie scène de western.

But this time, there was no camera inside.

Mais cette fois-ci, il n'y avait pas de caméra à l'intérieur.

There was nothing really moving besides all the cameras

Il n'y avait rien qui bougeait vraiment,

à part toutes les caméras installées à l'extérieur.

installed outside.

The challenge of the actors was tremendous.

Le défi était énorme pour les acteurs.

They have to perform a flawless action visible from all the directions.

Ils devaient interpréter une action parfaite

visible depuis toutes les directions.

There's no possibility to hide a punch or not show the action.

Il n'y a pas moyen de cacher un coup de poing

ou de ne pas montrer l'action.

Everything is captured and everything is seen.

Tout est filmé et tout est vu.

The output of the capture --

Le résultat de la prise de vue –

this is our future capture --

c'est notre première prise de vue –

opened our eyes for the immense capabilities.

nous a ouvert les yeux sur d'immenses possibilités.

It was like a full 3D scan of the entire scene.

C'était comme un scan 3D complet de toute la scène.

We were able to move around and travel in the space.

Nous avons pu nous déplacer et voyager dans l'espace.

The thing about this,

Avec notre système, il ne s’agit plus de percevoir la lumière émise par un écran,

it's not anymore about perceiving the light emitted from a screen

but now traveling inside the light,

mais d'être à l'intérieur de la lumière,

traveling inside the scene.

d'être à l'intérieur de la scène.

This obviously opens possibilities for an enormous amount

Ce qui ouvre évidemment la porte

à une énorme quantité de récits et de méthodologies de création.

of storytelling and methodologies of creation.

This is the possibilities of your personal narrative,

C'est la possibilité de créer votre récit personnel,

the possibility of creating your own story inside,

votre propre histoire à l'intérieur de la scène

or maybe following other stories.

ou peut-être de suivre d'autres histoires.

Let's take a look at one of the last renders and see.

Jetons un œil à l'un des derniers rendus et voyons ça.

(Music)

(Musique)

What you're seeing here is full volumetric video,

Ce que vous voyez ici est une vidéo volumétrique complète

and there's no physical camera in the scene.

et il n'y a pas de caméra sur scène.

(Music)

(Musique)

We have the full control

Nous avons le contrôle total

(Music, sounds of combat)

(Musique, bruits de lutte)

of space and time.

de l'espace et du temps.

(Music, sounds of combat)

(Musique, bruits de lutte)

Now, again, no physical camera was here.

Là encore, il n'y avait pas de caméra physique.

Everything was captured surrounding.

Tout a été filmé depuis tout autour de la scène.

Now, this is very nice,

C'est très bien,

but what if we wanted to see the scene, maybe, from the eyes of the horse?

mais si nous voulons voir la scène, peut-être, avec les yeux du cheval ?

Well, we can do that as well.

Eh bien, nous pouvons le faire aussi.

(Horse galloping)

(Le cheval galope)

So what you're seeing right now is the same action,

Ce que vous voyez en ce moment c’est la même action,

but this time, we're watching exactly from the eyes of the horse.

mais cette fois, notre point de vue est celui du cheval.

The possibilities are, well, unlimited.

Les possibilités sont illimitées.

(Applause)

(Applaudissements)

Thank you.

Merci.

(Applause)

(Applaudissements)

So this is all great for creators and storytellers.

Tout ceci est donc formidable pour les créateurs et les scénaristes.

It really opens a huge canvas

C'est une immense toile ouverte

for a different type of storytelling and moviemaking.

à un autre type de narration et de réalisation au cinéma.

But what about the audience?

Mais qu'en est-il du public ?

How can the audience experience this differently?

Comment le public peut-il le vivre différemment ?

In order to [create] our explorations,

Pour nos recherches,

we partnered with Paramount Pictures

nous nous sommes associés à Paramount Pictures

in order to explore immersive media in a Hollywood movie production.

afin d'explorer les médias immersifs

dans une production cinématographique hollywoodienne.

Together with the director Randal Kleiser,

Avec le réalisateur Randal Kleiser,

we reimagined the iconic movie of 1978,

nous avons réimaginé « Grease » le film emblématique de 1978.

"Grease."

Certains d'entre vous le connaissent, d'autres non.

Some of you know it, some of you don't.

A 40-year-old movie, amazing experience.

Un film qui a 40 ans, une expérience incroyable.

And our goal was really to look at how we can take this iconic action and dance

Notre objectif était de voir

comment nous pouvions améliorer cette scène et cette danse iconiques

and bring it deeper into the experience,

pour les vivre plus intensément,

bring it deeper into the audience.

pour mieux inclure le public.

Imagine that you can not just watch the movie

Imaginez que vous pouvez non seulement regarder le film,

but get inside it and dance with the actors

mais aussi entrer dans l'action et danser avec les acteurs lors du spectacle.

and dance with the performance.

Now we're breaking, really, the traditional 2D mindset of thinking,

Nous brisons vraiment le concept traditionnel de la 2D

and bringing a much richer possibility of moviemaking

et nous apportons une liberté beaucoup plus riche

de créer des films et du contenu.

and content creation.

But why watch it on the screen?

Mais pourquoi le regarder à l'écran ?

Essayons d'amener ces acteurs ici sur scène.

Let's try to bring these actors here on the stage.

So they're not going to really come --

Ils ne viendront pas vraiment –

je vais utiliser un iPad.

I'm going to use an iPad.

(Laughter)

(Rires)

Sorry.

Désolé.

I'm going to use an iPad in order to bring in augmented reality.

Je vais utiliser un iPad afin d'introduire la réalité augmentée.

Now, obviously, these devices have their own limitations

Il est évident que ces appareils ont leurs propres limites

in terms of the data-computing process,

en matière de traitement des données

so we have to reduce the amount of resolution.

et nous devons donc réduire la résolution.

So what I'm doing now, I'm placing here a marker,

Donc, ce que je fais maintenant, c'est que je place ici un marqueur,

so I'll be able to position exactly where I want everyone to appear.

afin de pouvoir indiquer exactement où je veux que tout le monde apparaisse.

OK.

D'accord.

I think we have them here.

Je pense qu’ils sont arrivés.

(Applause)

(Applaudissements)

John Travolta, or --

John Travolta ou –

(Laughter)

(Rires)

a version of him.

une version de lui.

Let's take a look.

Voyons voir.

(Vidéo)

(Video) Female: Hey.

Une femme : Hey.

Male: And that is how it's done.

Un homme : On fait comme ça.

Une femme : À toi.

Female: Your turn.

Un homme : Hé les gars ! Regardez ça.

Male: Hey, guys! Check this out.

(Chanson : « You’re the one that I want »)

(Song: "You're the one that I want")

Danny: Sandy!

Danny : Sandy !

Sandy: Tell me about it, stud.

Sandy : Tell me about it, stud

(Chantant) I've got chills. They're multiplaying

(Singing) I got chills. They're multiplying

And I'm losing control

And I'm losing control

'Cause the power you're supplying

'Cause the power you're supplying

It's electrifying!

It's electrifying!

(Video ends)

(Fin de la vidéo)

(Applause and cheers)

(Applaudissements et acclamations)

Diego Prilusky: Thank you.

(Applause and cheers)

So as you can see,

Comme vous pouvez le voir,

we can watch and experience content in the traditional way

on peut donc regarder et vivre des contenus

de manière traditionnelle ou immersive.

or in an immersive way.

Really, the possibilities are open.

Les possibilités sont immenses.

We're not trying to change or replace movies.

Nous n'essayons pas de changer ou de remplacer les films.

We're enhancing them.

Nous les améliorons.

The technologies enable new possibilities to start thinking beyond the flat screen.

Les technologies offrent de nouvelles possibilités

pour commencer à penser au-delà de l'écran plat.

We're in immersive and really exciting times in filmmaking.

Nous vivons une époque immersive et passionnante pour la réalisation de films.

We're at the threshold of a new era.

Nous sommes au seuil d'une nouvelle ère.

We're opening the gates for new possibilities

Nous ouvrons la porte à de nouvelles possibilités

of immersive storytelling,

de narration immersive,

and exploration and defining what immersive media filmmaking means.

de recherches et de redéfinition

de ce que signifie la réalisation de films sur support immersif.

We're really just at the beginning,

Nous n'en sommes qu'au début,

and we invite you all to join us.

et nous vous invitons à nous rejoindre.

Thank you.

Je vous remercie.

(Applause)

(Applaudissements)