How volumetric video brings a new dimension to filmmaking | Diego Prilusky

Fordító: Andi Vida Lektor: Reka Lorinczy

I love making movies.

Imádok filmezni.

Motion pictures have been in existence for more than a hundred years.

Több mint száz éve létezik a mozgókép.

Filmmaking hasn't changed for the dimensional mindset.

A filmezés nem változtatta meg a dimenziós gondolkodást.

Placing the camera in a scene and pressing "record" hasn't changed.

Beteszik a kamerát egy jelenetbe, megnyomják a "Felvétel" gombot, és ennyi.

Filmmaking is still a frontal experience,

A filmezés még mindig frontális élmény,

and creating the film has the possibility

és a filmgyártás azt teszi lehetővé,

to follow the same direction of the content creation.

hogy a tartalomalkotó szemszögéből kövessük végig a filmet.

We still stand in front of a flat image,

Még mindig egy sík kép előtt állunk,

watching the fiction.

és nézzük a kitalált történetet.

There's nothing wrong with it.

Nincs ezzel semmi gond.

I love watching movies and going to the theaters.

Imádom a mozit, és imádok színházba járni.

The experiences can be such emotional experiences.

Egészen felkavaró élményt nyújthatnak.

The art and craft of emotional experiences within a frame

Az érzelmi élmények művészete és mestersége egy képkockán belül

can be so strong to drive a stronger emotion.

olyan erejű lehet, hogy egészen mély érzelmeket gerjeszthet.

The question we're asking is,

Felmerült bennünk a kérdés:

How the experience of motion pictures can exist beyond the flat screen.

A mozifilm élménye hogyan létezhet a síkképernyőn túl?

How can we start creating content

Hogyan kezdjünk el tartalmat létrehozni

for the next generation of content experiences?

a tartalomélményen felnövő következő generációnak?

Traditionally, when we imagine a scene,

Amikor hagyományosan elképzelünk egy jelenetet,

we look at the frame and the composition.

képkockában és kompozícióban gondolkodunk.

We have to think about how we create depth and parallax

Meg kell terveznünk, hogyan teremtsünk mélységet és távolságot

using foreground, background elements as the camera moves.

az előtér és a háttér elemeivel, a kamera mozgatásával.

With the technology today and devices of VR glasses,

A ma ismert technológiákkal,

a VR és AR szemüvegekkel, okos eszközökkel

AR glasses, smart devices,

allowing three-dimensional and full navigation in space,

lehetséges három dimenziót és teljes navigációt teremteni a térben.

we have the possibility to enable audiences

Lehetőségünk van arra,

to experience content from multiple perspectives.

hogy a nézők több szemszögből éljék át a tartalmat.

What we have to think about is how we take this technology,

Azt kell átgondolnunk, hogy ezzel a technológiával,

all the capabilities,

az összes adottsággal

and enable the experience to move farther away inside the scene.

hogyan mélyíthetnénk el az élményt a jeleneten belül.

Now we're not talking about video games or computer-generated actors,

Most nem a videójátékokról, virtuális színészekről van szó,

which look tremendously realistic.

akik félelmetesen valósághűek,

We're talking about real actors and real performance,

hanem hús-vér színészekről, valóságos előadásokról,

performing onstage.

valóságos színpadról beszélünk.

We have to start thinking how we capture the actors

Azt kell átgondolnunk, hogyan vegyük fel a színészeket

and how we capture the real scene

és a valóságos jeleneteket úgy,

in order to immerse inside.

hogy teljesen belemélyedjünk.

Now, we're familiar with the 360-degree video,

A 360 fokos videót már ismerjük,

where you place a camera inside the scene

ahol a jelenet közepébe állítjuk a kamerát,

and you can create this beautiful panoramic image all around you,

és ilyen szép panorámaképet hozhatunk létre magunk körül,

but from the same aspect,

de a nézőpont nem változik,

filmmaking is still frontal.

a filmezés még mindig frontális.

In order to emerge fully inside the scene,

Ahhoz, hogy teljesen belehelyezkedhessünk a jelenetbe,

we will need to capture the light from all the possible directions.

minden lehetséges irányból meg kell ragadnunk a fényt.

We will have to surround the scene with an enormous amount of sensors,

Temérdek sok érzékelővel kell körbevennünk a jelenetet,

with all possible capabilities to capture the light

mindent be kell vetnünk, amivel megragadhatjuk a fényt,

and enable us to emerge inside afterwards again.

és ami lehetővé teszi, hogy utána újra kilépjünk onnan.

Now, in this setup,

Ebben a beállításban

there's no more foreground or background

nincs sem előtér, sem háttér,

or a camera placed in space

nincs a térben elhelyezett kamera,

but hundreds of sensors capturing the light

van viszont több száz fényérzékelő,

and capturing the motion from all the possible directions.

melyek minden lehetséges irányból rögzítik a mozgást is.

With the new technological advancements,

Az új technológia lehetőségeivel kezdjük nézni

we can start looking at 3D photography,

a 3D-s fotózást,

capturing the light from multiple perspectives,

több szemszögből vesszük fel a fényt,

enabling us to reconstruct the object.

így újraépíthetjük a tárgyat.

This is like photography in 3D space.

Ez olyan, mint egy térben elhelyezett 3D-s fotó.

Now, with these technological advancements,

Az új technológiával

we can record video not just as a flat image

nemcsak síkképes videót vehetünk fel,

hanem térlátást, volument adhatunk neki.

but as a volume.

This is what we call "volumetric video,"

Ezért hívjuk "volumetrikus" videónak.

and it has the capability to record every action of the scene

Ezzel rögzíthetjük a jelenet összes cselekményét,

as a full three-dimensional volume.

háromdimenziós kiterjesztésben.

Now, what is a voxel?

És mi a voxel?

A voxel is like a three-dimensional pixel,

A pixel, vagyis "képkocka" térbeli kiterjesztése,

but instead of being a flat image square, staying light and colored,

mely nem csak egy sík négyzet, ami fény- és színinformációt tartalmaz,

it's like a three-dimensional cube in space,

hanem térbeli, háromdimenziós kocka,

with x, y, and z positions.

x, y és z koordinátákkal.

This enables us to create a full capture of the scene

Segítségével bármilyen szemszögből

from any perspective.

teljes jelenetet vehetünk fel.

Now this renders a fully light-immersive scene

Egy fényt alkalmazó immerzív jelenetet játszik le

from multiple perspectives.

többféle nézőpontból.

This capability requires an insane amount of information to be processed.

Ehhez a képességhez őrületes mennyiségű információt kell feldolgozni.

We will have to capture the light from an enormous amount of cameras

Temérdek kamera kell ahhoz, hogy felvegyük a fényt

to create this information.

az információ megteremtéséhez.

Now, in order to do such a thing,

Olyan beállítás kell,

we would need a setup that would host a numerous amount of cameras

mely számos kamera kezelésére képes

installed in a stage

egyetlen színpadon,

and a stage big enough in order to fit a full cinematic experience.

a színpad pedig legyen elég nagy a teljes filmes élményhez.

Now that sounds like a crazy idea, but that's exactly what we did.

Ez persze őrült ötletnek hangzik, de pontosan ezt tettük.

For the last three years,

Az utóbbi három évben

we have been building a huge volumetric camera chamber.

hatalmas volumetrikus kameracsarnokot építettünk.

It's 10,000 square feet of a stage,

Ez egy 930 négyzetméteres színpad,

enabling to capture the action from any location.

itt bárhonnan felvehetjük az cselekményt.

We have deployed hundreds of cameras,

Felállítottunk több száz kamerát,

sending a tremendous amount of information

amik hihetetlen mennyiségű információt küldenek

to a huge data center powered by Intel supercomputers.

egy óriási adatközpontba, ahol Intel szuperszámítógépek üzemelnek.

The ability to have this 10,000 feet

Ekkora színpadon

enables us to fit any kind of action,

bármilyen cselekmény

any kind of performance.

és bármilyen előadás elfér.

It is the size of an average Broadway stage.

Akkora, mint egy átlagos Broadway-színpad.

We call it Intel Studios,

Intel Stúdiónak hívjuk,

and it's the largest volumetric stage in the world,

ez a világ legnagyobb volumetrikus színpada,

with the objective of enabling and exploring

célja, hogy lehetővé tegye és feltárja ezt az immerzív médiás filmgyártást

the next generation of this immersive media filmmaking.

a következő generációnak.

Now, to test these ideas,

Ötleteink tesztelésére azon gondolkoztunk,

we were thinking about what we can do as the first scene to try it out.

mi legyen az első jelenetben, hogyan próbáljuk ki a technikát.

So we chose the Western scene.

Vadnyugati jelenetet választottunk.

We brought horses, set designers, dirt,

Lovakat vettünk, beállítottuk a díszletet, sarat hordtunk a színpadra,

everything needed to create the full scene of a Western.

mindent, ami csak kell egy teljes western jelenethez.

But this time, there was no camera inside.

De ezúttal nem volt belső kamera.

There was nothing really moving besides all the cameras

Semmi, ami az összes külső kamerán kívül

installed outside.

igazán mozogna.

The challenge of the actors was tremendous.

A színészek félelmetes kihívás elé kerültek.

They have to perform a flawless action visible from all the directions.

Tökéletes alakítást kellett nyújtaniuk, ami minden irányból egyformán látható.

There's no possibility to hide a punch or not show the action.

Lehetetlen elrejteni egy ütést, vagy nem mutatni az akciót.

Everything is captured and everything is seen.

Mindent felveszünk, minden látszik.

The output of the capture --

A felvétel eredménye –

ez az első felvételünk –

this is our future capture --

opened our eyes for the immense capabilities.

felnyitotta a szemünket a lehetőségek végtelen tárházára.

It was like a full 3D scan of the entire scene.

Az egész jelenetet 3D-ben láttuk.

We were able to move around and travel in the space.

Körbe tudtuk járni, bejártuk a teret.

The thing about this,

Ez már nemcsak arról szól,

it's not anymore about perceiving the light emitted from a screen

hogy észleljük a fényt, amit egy képernyő kibocsát,

but now traveling inside the light,

hanem a fényen belül utazunk,

traveling inside the scene.

a jelenet belsejében utazunk.

This obviously opens possibilities for an enormous amount

Nyilvánvaló, hogy ez a módszer

of storytelling and methodologies of creation.

a történetmesélés és alkotói módszerek milliárdnyi lehetőségét veti fel.

This is the possibilities of your personal narrative,

Személyes narratívánk lehetőségeit,

the possibility of creating your own story inside,

saját belső történeteink elmesélésének lehetőségeit,

or maybe following other stories.

vagy mások történeteinek követését.

Let's take a look at one of the last renders and see.

Nézzük meg az egyik legutóbbi felvételünket.

(Music)

(Zene)

What you're seeing here is full volumetric video,

Itt egy teljes mértékben volumetrikus videót látunk,

and there's no physical camera in the scene.

és nincs valódi kamera a jelenetben.

(Music)

(Zene)

We have the full control

Teljes mértékben uraljuk...

(Music, sounds of combat)

(Zene, csatazaj)

of space and time.

...a teret és az időt.

(Music, sounds of combat)

(Zene, csatazaj)

Now, again, no physical camera was here.

Ismétlem: itt egyáltalán nincs valódi kamera.

Everything was captured surrounding.

Mindent kívülről vettünk fel.

Now, this is very nice,

Na igen, mindez szép és jó,

but what if we wanted to see the scene, maybe, from the eyes of the horse?

de mi van, ha mondjuk egy ló szemszögéből akarjuk látni a jelenetet?

Well, we can do that as well.

Nos, semmi akadálya.

(Horse galloping)

(Lódobogás)

So what you're seeing right now is the same action,

Itt ugyanazt a cselekményt látjuk,

but this time, we're watching exactly from the eyes of the horse.

ám ezúttal a ló szemszögéből.

The possibilities are, well, unlimited.

Mondom: a lehetőségeink korlátlanok.

(Applause)

(Taps)

Thank you.

Köszönöm.

(Applause)

(Taps)

So this is all great for creators and storytellers.

Mindez persze remek az alkotóknak és a forgatókönyvíróknak.

It really opens a huge canvas

Óriási teret nyit

for a different type of storytelling and moviemaking.

a különféle történetek és a filmezés előtt.

But what about the audience?

De mi van a nézőkkel?

How can the audience experience this differently?

Hogyan élhetik át ezt másképp?

In order to [create] our explorations,

Ahhoz, hogy megosszuk eredményeinket,

we partnered with Paramount Pictures

összefogtunk a Paramount Pictures stúdióval,

in order to explore immersive media in a Hollywood movie production.

így ezt az immerzív médiát hollywoodi filmben mutathatjuk be.

Together with the director Randal Kleiser,

Randal Kleider igazgatóval együtt

we reimagined the iconic movie of 1978,

újragondoltuk az 1978-as kultikus filmet,

"Grease."

a Grease-t [Pomádé].

Some of you know it, some of you don't.

Biztos van itt, aki emlékszik rá, mások meg nem.

A 40-year-old movie, amazing experience.

Negyven éves film, csodás élmény.

And our goal was really to look at how we can take this iconic action and dance

És mi arra voltunk kíváncsiak, hogyan hozhatunk ki mélyebb élményt

ebből az ikonikus cselekményből és táncból,

and bring it deeper into the experience,

bring it deeper into the audience.

hogyan vihetjük közelebb a nézőkhöz.

Imagine that you can not just watch the movie

Képzeljék el, hogy nemcsak nézik a filmet,

but get inside it and dance with the actors

de bele is kerülnek, együtt táncolnak a színészekkel,

and dance with the performance.

maguk is az előadás részesei lesznek.

Now we're breaking, really, the traditional 2D mindset of thinking,

Most tényleg megtörjük a hagyományos kétdimenziós gondolkodásmódot,

and bringing a much richer possibility of moviemaking

és teljesen kiaknázzuk

a filmkészítés és tartalomteremtés lehetőségeit.

and content creation.

But why watch it on the screen?

De miért is kéne ehhez filmvászon?

Let's try to bring these actors here on the stage.

Hozzuk a színészeket ide a színpadra!

So they're not going to really come --

Valójában persze nem jönnek ide,

I'm going to use an iPad.

iPaddel varázsolom ide őket.

(Laughter)

(Nevetés)

Sorry.

Bocsánat.

I'm going to use an iPad in order to bring in augmented reality.

IPaddel hozom ide őket a kiterjesztett valóságba.

Now, obviously, these devices have their own limitations

Ezeknek az eszközöknek persze megvannak a korlátai,

in terms of the data-computing process,

az adatfeldolgozás folyamatát tekintve,

so we have to reduce the amount of resolution.

ezért csökkentenünk kell a felbontást.

So what I'm doing now, I'm placing here a marker,

Ide teszek egy jelzést,

so I'll be able to position exactly where I want everyone to appear.

így egészen pontosan beállíthatom minden szereplő helyzetét.

OK.

Kész.

I think we have them here.

Azt hiszem, itt is vannak.

(Applause)

(Taps)

John Travolta, or --

John Travolta, vagyis...

(Laughter)

(Nevetés)

a version of him.

...egyik változata.

Let's take a look.

Nézzük csak.

(Video) Female: Hey.

(Video): Nő: Hé!

Male: And that is how it's done.

Férfi: Hát így készült.

Female: Your turn.

Nő: Te jössz!

Male: Hey, guys! Check this out.

Férfi: Hé, srácok! Figyeljetek!

(Song: "You're the one that I want")

(Dal: Nekem férfi kell)

Danny: Sandy!

Danny: Sandy!

Sandy: Tell me about it, stud.

Sandy: Mondd csak, szépfiú!

(Singing) I got chills. They're multiplying

(Ének) Hideg ráz, forr a vérem

And I'm losing control

Táncot jár bolond szívem

'Cause the power you're supplying

Erőm elhagy, hogyha itt vagy

It's electrifying!

Hidd el, úgy imádlak!

(Video ends)

(Videó vége)

(Applause and cheers)

(Taps és ujjongás)

Diego Prilusky: Thank you.

Diego Prilusky: Köszönöm.

(Applause and cheers)

(Taps és ujjongás)

So as you can see,

Tehát, amint látják,

we can watch and experience content in the traditional way

hagyományos módon is,

vagy belemerülve is láthatunk, átélhetünk tartalmakat.

or in an immersive way.

Really, the possibilities are open.

A lehetőségek tárháza tényleg végtelen.

We're not trying to change or replace movies.

Nemcsak módosítani vagy helyettesíteni akarjuk a mozit,

We're enhancing them.

hanem fokozzuk az élményt.

The technologies enable new possibilities to start thinking beyond the flat screen.

A mai technológiákkal kiléphetünk a síkképernyőről, filmvászonról.

We're in immersive and really exciting times in filmmaking.

Immerzív és valóban izgalmas időket élünk a filmgyártásban.

We're at the threshold of a new era.

Teljesen új korszak küszöbén állunk.

We're opening the gates for new possibilities

Most nyitogatjuk az új lehetőség,

az immerzív történetmesélés kapuit.

of immersive storytelling,

and exploration and defining what immersive media filmmaking means.

Most tárjuk fel és határozzuk meg, mit jelent az immerzív médiás filmgyártás.

We're really just at the beginning,

Még tényleg csak a kezdetén járunk,

and we invite you all to join us.

és mindannyiukat hívjuk, vegyenek részt benne.

Thank you.

Köszönöm.

(Applause)

(Taps)