How volumetric video brings a new dimension to filmmaking | Diego Prilusky

Traductor: Lidia Cámara de la Fuente Revisor: Silvina Katz

I love making movies.

Me encanta hacer películas.

Motion pictures have been in existence for more than a hundred years.

Las películas existen desde hace más de cien años.

Filmmaking hasn't changed for the dimensional mindset.

El cine no ha cambiado en la mentalidad dimensional.

Placing the camera in a scene and pressing "record" hasn't changed.

La colocación de la cámara en una escena y presionar "grabando" no ha cambiado.

Filmmaking is still a frontal experience,

El cine sigue siendo una experiencia frontal,

and creating the film has the possibility

y la creación de la película da la posibilidad

to follow the same direction of the content creation.

de seguir la misma dirección de la creación de contenidos.

We still stand in front of a flat image,

Todavía estamos de pie ante una imagen plana,

watching the fiction.

viendo ficción.

There's nothing wrong with it.

No hay nada malo en ello.

I love watching movies and going to the theaters.

Me encanta ver películas e ir al teatro.

The experiences can be such emotional experiences.

Las experiencias pueden ser grandes experiencias emocionales.

The art and craft of emotional experiences within a frame

El arte y la artesanía de experiencias emocionales dentro de un marco

can be so strong to drive a stronger emotion.

puede ser tan fuerte como para manejar una emoción fuerte.

The question we're asking is,

La pregunta que nos hacemos es,

How the experience of motion pictures can exist beyond the flat screen.

¿Cómo existe la experiencia de imágenes en movimiento más allá de la pantalla plana?

How can we start creating content

¿Cómo empezamos a crear contenido

for the next generation of content experiences?

para la próxima generación de experiencias de contenido?

Traditionally, when we imagine a scene,

Tradicionalmente, cuando nos imaginamos una escena,

we look at the frame and the composition.

nos fijamos en el marco y la composición.

We have to think about how we create depth and parallax

Tenemos que pensar en cómo creamos profundidad y paralaje

using foreground, background elements as the camera moves.

con el primer plano y los elementos del fondo al mover la cámara.

With the technology today and devices of VR glasses,

Con la tecnología de hoy y dispositivos de gafas de realidad virtual,

AR glasses, smart devices,

las gafas de RA, los dispositivos inteligentes,

allowing three-dimensional and full navigation in space,

que permiten la navegación tridimensional y completa en el espacio,

we have the possibility to enable audiences

con esto tenemos la posibilidad de permitir que el público

to experience content from multiple perspectives.

experimente contenido desde múltiples perspectivas.

What we have to think about is how we take this technology,

En lo que tenemos que pensar es cómo tomamos esta tecnología,

all the capabilities,

todas las capacidades,

and enable the experience to move farther away inside the scene.

y permitimos la experiencia de movernos más lejos dentro de la escena.

Now we're not talking about video games or computer-generated actors,

No estoy hablando de juegos de vídeo o actores generados por computadora,

which look tremendously realistic.

que se perciben muy realistas.

We're talking about real actors and real performance,

Hablo de actores reales e interpretación real

performing onstage.

actuando en el escenario.

We have to start thinking how we capture the actors

Tenemos que pensar en la forma como captamos a los actores

and how we capture the real scene

y la escena real

in order to immerse inside.

para hacer una inmersión.

Now, we're familiar with the 360-degree video,

Estamos familiarizados con el vídeo de 360 ​​grados,

where you place a camera inside the scene

donde se coloca una cámara dentro de la escena

and you can create this beautiful panoramic image all around you,

y se crea una imagen panorámica hermosa a su alrededor,

but from the same aspect,

pero desde el mismo aspecto,

filmmaking is still frontal.

el cine sigue siendo frontal.

In order to emerge fully inside the scene,

Para salir totalmente dentro de la escena,

we will need to capture the light from all the possible directions.

tendremos que capturar la luz desde todas las direcciones posibles.

We will have to surround the scene with an enormous amount of sensors,

Tendremos que rodear la escena con muchos sensores,

with all possible capabilities to capture the light

con todas las capacidades posibles para capturar la luz

and enable us to emerge inside afterwards again.

y eso nos permitirá emerger posteriormente de nuevo.

Now, in this setup,

Ahora, en esta configuración,

there's no more foreground or background

no hay más primer plano o fondo

or a camera placed in space

o una cámara colocada en el espacio

but hundreds of sensors capturing the light

pero cientos de sensores de captura de la luz

and capturing the motion from all the possible directions.

y capturar el movimiento de todas las direcciones posibles.

With the new technological advancements,

Con los nuevos avances tecnológicos,

we can start looking at 3D photography,

podemos empezar a ver la fotografía en 3D,

capturing the light from multiple perspectives,

captar la luz desde múltiples perspectivas,

enabling us to reconstruct the object.

lo que nos permite reconstruir el objeto.

This is like photography in 3D space.

Esto es como la fotografía en el espacio 3D.

Now, with these technological advancements,

Ahora, con estos avances tecnológicos,

we can record video not just as a flat image

podemos grabar vídeo no sólo como una imagen plana

but as a volume.

sino como un volumen.

This is what we call "volumetric video,"

Esto es lo que llamamos "vídeo volumétrico"

and it has the capability to record every action of the scene

y tiene la capacidad de grabar todas las acciones de la escena

as a full three-dimensional volume.

como un volumen en tres dimensiones completo.

Now, what is a voxel?

Ahora, ¿qué es un voxel?

A voxel is like a three-dimensional pixel,

Un voxel es como un píxel en tres dimensiones,

but instead of being a flat image square, staying light and colored,

pero en lugar de ser un cuadrado de imagen plana, luminosa y de color,

it's like a three-dimensional cube in space,

es como un cubo tridimensional en el espacio,

with x, y, and z positions.

con posiciones X, Y, y Z .

This enables us to create a full capture of the scene

Esto nos permite crear una captura completa de la escena

from any perspective.

desde cualquier perspectiva.

Now this renders a fully light-immersive scene

Esto reproduce una escena completa con la luz de inmersión

from multiple perspectives.

desde múltiples perspectivas.

This capability requires an insane amount of information to be processed.

Esto requiere una cantidad descabellada de información a procesar.

We will have to capture the light from an enormous amount of cameras

Hay que capturar la luz de una enorme cantidad de cámaras

to create this information.

para crear esta información.

Now, in order to do such a thing,

Para hacerlo, necesitaríamos una configuración

we would need a setup that would host a numerous amount of cameras

que sirviera de sede a numerosas cámaras

instaladas en un escenario lo suficientemente grande

installed in a stage

and a stage big enough in order to fit a full cinematic experience.

para poder adaptarse a una experiencia cinematográfica completa.

Now that sounds like a crazy idea, but that's exactly what we did.

Esto suena como una idea loca, pero es exactamente lo que hicimos.

For the last three years,

Durante los últimos tres años,

we have been building a huge volumetric camera chamber.

hemos estado construyendo una enorme cabina para la cámara volumétrica.

It's 10,000 square feet of a stage,

Son 3000 m2,

enabling to capture the action from any location.

que permiten capturar la acción desde cualquier ubicación.

We have deployed hundreds of cameras,

Hemos desplegado cientos de cámaras,

sending a tremendous amount of information

enviando gran cantidad de información

to a huge data center powered by Intel supercomputers.

a un enorme centro de datos con soporte de unas supercomputadoras de Intel.

The ability to have this 10,000 feet

La capacidad de tener estos 3000 m2

enables us to fit any kind of action,

nos permite adaptarnos a cualquier tipo de acción,

any kind of performance.

cualquier tipo de actuación.

It is the size of an average Broadway stage.

Es del tamaño de un escenario medio de Broadway.

We call it Intel Studios,

Lo llamamos Intel Studios,

and it's the largest volumetric stage in the world,

y es el escenario volumétrico más grande en el mundo,

with the objective of enabling and exploring

con el objetivo de permitir y explorar

the next generation of this immersive media filmmaking.

la próxima generación de esta cinematografía inmersiva.

Now, to test these ideas,

Para poner a prueba estas ideas,

we were thinking about what we can do as the first scene to try it out.

pensamos en cómo hacer la primera escena para probarlo.

So we chose the Western scene.

Así que elegimos la escena de un wéstern.

We brought horses, set designers, dirt,

Con caballos, escenógrafos, suciedad,

everything needed to create the full scene of a Western.

todo lo necesario para crear la escena completa de un wéstern.

But this time, there was no camera inside.

Pero esta vez, no había ninguna cámara en el interior.

There was nothing really moving besides all the cameras

No había nada realmente moviéndose además de todas las cámaras

installed outside.

instalada fuera.

The challenge of the actors was tremendous.

El reto de los actores fue tremendo.

They have to perform a flawless action visible from all the directions.

Hay que realizar una acción sin defectos visibles desde todas las direcciones.

There's no possibility to hide a punch or not show the action.

No hay ninguna posibilidad de ocultar un puñetazo o no mostrar la acción.

Everything is captured and everything is seen.

Todo se captura y todo se ve.

The output of the capture --

El resultado de la captura,

this is our future capture --

esta es nuestra futura captura,

opened our eyes for the immense capabilities.

nos abrió los ojos por las inmensas capacidades.

It was like a full 3D scan of the entire scene.

Era como un análisis completo en 3D de toda la escena.

We were able to move around and travel in the space.

Hemos podido movernos y viajar en el espacio.

The thing about this,

Lo que pasa con esto,

it's not anymore about perceiving the light emitted from a screen

es que ya no se trata de la percepción de la luz emitida por una pantalla

but now traveling inside the light,

pero ahora viaja dentro de la luz,

traveling inside the scene.

viaja dentro de la escena.

This obviously opens possibilities for an enormous amount

Obviamente, esto abre posibilidades para una enorme cantidad

of storytelling and methodologies of creation.

de narrativas y metodologías de creación.

This is the possibilities of your personal narrative,

Se trata de las posibilidades de su historia personal,

the possibility of creating your own story inside,

la posibilidad de crear su historia propia interna,

or maybe following other stories.

o tal vez seguir otras historias.

Vamos a echar un vistazo a una de las últimas reproducciones.

Let's take a look at one of the last renders and see.

(Music)

(Música)

What you're seeing here is full volumetric video,

Lo que se ve aquí es un vídeo volumétrico completo,

and there's no physical camera in the scene.

y no hay ninguna cámara física en la escena.

(Music)

(Música)

We have the full control

Tenemos el control total

(Music, sounds of combat)

(Música, los sonidos de combate)

of space and time.

de espacio y tiempo.

(Music, sounds of combat)

(Música, los sonidos de combate)

Now, again, no physical camera was here.

De nuevo, no hay ninguna cámara física aquí.

Everything was captured surrounding.

Todo fue capturado de forma circundante.

Now, this is very nice,

Esto es muy bonito,

but what if we wanted to see the scene, maybe, from the eyes of the horse?

pero y si lo que queremos ver en la escena son los ojos de los caballos.

Well, we can do that as well.

Bueno, podemos hacer eso también.

(Horse galloping)

(Galope del caballo)

So what you're seeing right now is the same action,

Así que lo que vemos en este momento es la misma acción,

but this time, we're watching exactly from the eyes of the horse.

pero esta vez, desde la perspectiva de los ojos del caballo.

The possibilities are, well, unlimited.

Las posibilidades son, así, ilimitadas.

(Applause)

(Aplausos)

Thank you.

Gracias.

(Applause)

(Aplausos)

So this is all great for creators and storytellers.

Así que todo esto es muy bueno para creadores y narradores.

It really opens a huge canvas

Realmente se abre un enorme lienzo

for a different type of storytelling and moviemaking.

para un tipo diferente de narrativa y creación de películas.

But what about the audience?

Pero ¿qué pasa con el público?

How can the audience experience this differently?

¿Cómo puede la audiencia experimentar esto de manera diferente?

In order to [create] our explorations,

Para crear nuestras exploraciones,

we partnered with Paramount Pictures

nos hemos asociado con Paramount Pictures

in order to explore immersive media in a Hollywood movie production.

y así explorar los medios de inmersión en una producción de Hollywood.

Together with the director Randal Kleiser,

Junto con el director Randal Kleiser,

we reimagined the iconic movie of 1978,

reimaginamos la película icónica de 1978,

"Grease."

"Grease".

Some of you know it, some of you don't.

Algunos de Uds. la conocen, otros no.

A 40-year-old movie, amazing experience.

Con una película de hace 40 años es una experiencia increíble.

And our goal was really to look at how we can take this iconic action and dance

Y nuestro objetivo era realmente ver cómo grabar esta acción icónica y bailar

and bring it deeper into the experience,

y traerla a una experiencia más profunda,

bring it deeper into the audience.

llevarla más profundamente al público.

Imagine that you can not just watch the movie

Imagínese que uno no solo simplemente ve la película

but get inside it and dance with the actors

sino que entra en ella y baila con los actores

and dance with the performance.

y baila en medio del espectáculo.

Now we're breaking, really, the traditional 2D mindset of thinking,

Estamos rompiendo, en realidad, la mentalidad tradicional del 2D,

and bringing a much richer possibility of moviemaking

y trayendo una posibilidad mucho más rica de la cinematografía

and content creation.

y creación de contenidos.

But why watch it on the screen?

Pero ¿por qué verlo en la pantalla?

Let's try to bring these actors here on the stage.

Vamos a tratar de traer a estos actores al escenario aquí.

So they're not going to really come --

No van a venir en realidad.

I'm going to use an iPad.

Voy a utilizar un iPad.

(Laughter)

(Risas)

Sorry.

Lo siento.

I'm going to use an iPad in order to bring in augmented reality.

Voy a utilizar un iPad para traer la realidad aumentada.

Now, obviously, these devices have their own limitations

Obviamente, estos dispositivos tienen sus propias limitaciones

en relación al proceso de datos de la computación,

in terms of the data-computing process,

so we have to reduce the amount of resolution.

así que tenemos que reducir la cantidad de resolución.

So what I'm doing now, I'm placing here a marker,

Lo que hago ahora, es colocar aquí un marcador,

so I'll be able to position exactly where I want everyone to appear.

para poder posicionar exactamente donde quiero que todos aparezcan.

OK.

Bien.

I think we have them here.

Creo que los tenemos aquí.

(Applause)

(Aplausos)

John Travolta, or --

John Travolta,

(Laughter)

(Risas)

a version of him.

o una versión de él.

Let's take a look.

Vamos a ver.

(Video) Female: Hey.

(Video) Mujer: Hola.

Male: And that is how it's done.

Masculino: Y así es como se hace.

Female: Your turn.

Mujer: Tu turno.

Male: Hey, guys! Check this out.

Hombres: ¡Hola, chicos! Miren esto.

(Song: "You're the one that I want")

(Canción: "Tú eres el que yo quiero")

Danny: Sandy!

Danny: ¡Sandy!

Sandy: Tell me about it, stud.

Sandy: Dímelo a mí.

(Singing) I got chills. They're multiplying

(Canto) Tengo escalofríos. Se están multiplicando

And I'm losing control

y estoy perdiendo el control

'Cause the power you're supplying

Porque el poder que me das

It's electrifying!

es electrizante.

(Video ends)

(Vídeo termina)

(Applause and cheers)

(Aplausos y ovaciones)

Diego Prilusky: Thank you.

Diego Prilusky: Gracias.

(Applause and cheers)

(Aplausos y ovaciones)

So as you can see,

Así como se puede ver,

we can watch and experience content in the traditional way

podemos ver y experimentar el contenido de la manera tradicional

or in an immersive way.

o de una manera envolvente.

Really, the possibilities are open.

En realidad, las posibilidades están abiertas.

We're not trying to change or replace movies.

No estamos tratando de cambiar o reemplazar las películas.

We're enhancing them.

Las estamos mejorando.

The technologies enable new possibilities to start thinking beyond the flat screen.

La tecnología permite nuevas posibilidades de pensar más allá de la pantalla plana.

We're in immersive and really exciting times in filmmaking.

Estamos en tiempos emocionantes y de inmersión en el cine.

We're at the threshold of a new era.

Estamos en el umbral de una nueva era.

We're opening the gates for new possibilities

Estamos abriendo las puertas para nuevas posibilidades

of immersive storytelling,

de la narrativa de inmersión, de la exploración,

de definir lo que significa la realización cinematográfica de inmersión.

and exploration and defining what immersive media filmmaking means.

We're really just at the beginning,

Estamos justo en el comienzo

and we invite you all to join us.

y los invitamos a todos a que se unan a nosotros.

Thank you.

Gracias.

(Applause)

(Aplausos)