How volumetric video brings a new dimension to filmmaking | Diego Prilusky

Translator: ‌Behdad Khazaeli Reviewer: Masoud Motamedifar

I love making movies.

من عاشق فیلم‌سازی هستم.

Motion pictures have been in existence for more than a hundred years.

تصاویر متحرک بیش از صد سال است که وجود دارند.

Filmmaking hasn't changed for the dimensional mindset.

و فیلم‌سازی از دید ابعاد تغییر چندانی نکرده است.

Placing the camera in a scene and pressing "record" hasn't changed.

گذاشتن دوربین در صحنه و فشردن دکمه «ضبط» تغییر نکرده.

Filmmaking is still a frontal experience,

فیلم‌سازی هنوز یک تجربه رو به جلوست،

and creating the film has the possibility

و خلق یک فیلم همان امکان

to follow the same direction of the content creation.

ادامه دادن مسیر خلق محتوی را دارد.

We still stand in front of a flat image,

ما هنوز در جلو یک تصویر تخت می‌ایستیم،

watching the fiction.

و داستان را تماشا می‌کنیم.

There's nothing wrong with it.

که هیچ اشکالی هم ندارد.

I love watching movies and going to the theaters.

من عاشق فیلم دیدن و سینما رفتن هستم.

The experiences can be such emotional experiences.

می‌تواند تجربه‌ای پر از احساس باشد.

The art and craft of emotional experiences within a frame

هنر و ایجاد تجربه حسی درون یک قاب

can be so strong to drive a stronger emotion.

می‌تواند چنان قوی باشد که حس قوی‌تری را برانگیزد.

The question we're asking is,

سوالی که می‌پرسیم این است،

How the experience of motion pictures can exist beyond the flat screen.

تجربه تصاویر متحرک چگونه می‌تواند فراتر از صفحه‌های تخت ادامه یابد.

How can we start creating content

چطور می‌توانیم تولید محتوی

for the next generation of content experiences?

برای نسل بعدی تجارب محتوایی را آغاز کنیم؟

Traditionally, when we imagine a scene,

طبق سنت، وقتی که صحنه‌ای را تجسم می‌کنیم،

we look at the frame and the composition.

به قاب و ترکیب آن نگاه می‌کنیم.

We have to think about how we create depth and parallax

باید به این فکر کنیم که چطور عمق و تفاوت دید را

using foreground, background elements as the camera moves.

با استفاده از اِلمان‌های نمای جلو، نمای زمینه و حرکت دوربین بوجود آوریم.

With the technology today and devices of VR glasses,

با فناوری امروزه و تجهیزات عینک‌های وی آر،

AR glasses, smart devices,

عینک‌های اِی آر، دستگاه‌های هوشمند،

allowing three-dimensional and full navigation in space,

که امکان حرکت‌های کامل سه بعدی در فضا را ایجاد می‌کنند،

we have the possibility to enable audiences

این امکان را داریم تا برای مخاطبین خود

to experience content from multiple perspectives.

امکان تجربه محتوی را از چندین دیدگاه فراهم آوریم.

What we have to think about is how we take this technology,

چیزی که باید درباره‌اش فکر کنیم این است که چطور می‌توانیم از این فناوری،

all the capabilities,

و همه توانایی‌هایش،

and enable the experience to move farther away inside the scene.

برای حرکتی فراتر به داخل صحنه استفاده کرد.

Now we're not talking about video games or computer-generated actors,

ما از بازی‌های کامپیوتری یا هنرپیشه‌های تولید شده توسط کامپیوتر صحبت نمی‌کنیم،

which look tremendously realistic.

که خیلی واقعی به نظر می‌رسند.

We're talking about real actors and real performance,

ما از هنرپیشه‌های واقعی و اجرا‌های واقعی صحبت می‌کنیم،

performing onstage.

که روی صحنه اجرا می‌کنند.

We have to start thinking how we capture the actors

باید به این فکر کنیم که چطور هنرپیشه‌ها را ضبط می‌کنیم

and how we capture the real scene

چطور صحنه‌های واقعی را ضبط می‌کنیم

in order to immerse inside.

تا حس کنیم که داخل آن شده‌ایم.

Now, we're familiar with the 360-degree video,

ما با ویدئو‌های ۳۶۰ درجه‌ای آشنا هستیم،

where you place a camera inside the scene

که شما دوربینی را داخل صحنه می‌گذارید

and you can create this beautiful panoramic image all around you,

و این تصویر زیبای پانوراما را از کل اطرافت می‌سازی،

but from the same aspect,

اما تنها از همان نقطه،

filmmaking is still frontal.

فیلم‌سازی هنوز در حال حرکت به جلو است.

In order to emerge fully inside the scene,

برای آنکه کاملا در صحنه غرق شویم،

we will need to capture the light from all the possible directions.

باید نور را از تمامی زوایای ممکن دریافت کنیم.

We will have to surround the scene with an enormous amount of sensors,

باید صحنه را با تعداد زیادی حسگر احاطه کنیم،

with all possible capabilities to capture the light

با تمامی امکانات ممکن در ثبت نور

and enable us to emerge inside afterwards again.

تا اجازه دهد که بعدا داخل آن را دوباره آشکار کنیم.

Now, in this setup,

با این آماده سازی،

there's no more foreground or background

دیگر نمای جلو یا نمای زمینه وجود ندارد

or a camera placed in space

و بجای دوربینی که در محل قرار گرفته باشد

but hundreds of sensors capturing the light

صد‌ها حسگر نور را ثبت می‌کنند

and capturing the motion from all the possible directions.

و حرکت را از تمامی زوایای ممکن دریافت می کنند.

With the new technological advancements,

با پیشرفت‌های جدید در فناوری،

we can start looking at 3D photography,

می‌توانیم، با نگاه به عکاسی ۳ بعدی شروع کنیم،

capturing the light from multiple perspectives,

که نور را از زوایای مختلف ثبت می‌کند،

enabling us to reconstruct the object.

و اجازه می‌دهد تا شئ را دوباره بازسازی کنیم.

This is like photography in 3D space.

این شبیه به عکاسی سه بعدی در فضا است.

Now, with these technological advancements,

با این پیشرفت‌های فناوری،

we can record video not just as a flat image

نه تنها می‌توانیم ویدئو را مثل یک صفحه صاف

but as a volume.

بلکه می‌توانیم در حجم ضبط کنیم.

This is what we call "volumetric video,"

این چیزی است که نامش را «ویدیو حجمی» گذاشته‌ایم،

and it has the capability to record every action of the scene

و می‌تواند هر حرکتی را در صحنه را

as a full three-dimensional volume.

به شکل یک حجم سه بعدی ضبط کند.

Now, what is a voxel?

حالا منظورمان از وُکسل چیست؟

A voxel is like a three-dimensional pixel,

وکسل همان پیکسل سه بعدی است،

but instead of being a flat image square, staying light and colored,

اما بجای آنکه یک مربع صاف تصویر باشد، که نور و رنگ را نگاه می‌دارد،

it's like a three-dimensional cube in space,

مثل یک مکعب سه-بعدی در فضا است،

with x, y, and z positions.

با مختصات x، y و z.

This enables us to create a full capture of the scene

این کار اجازه می‌دهد تا تمامی صحنه را

from any perspective.

از هر زاویه‌ای ثبت کنیم.

Now this renders a fully light-immersive scene

که تصاویری کاملا دربرگیرنده

from multiple perspectives.

از زوایای مختلف باز تولید می‌شوند.

This capability requires an insane amount of information to be processed.

این قابلیت نیازمند پردازش حجم دیوانه‌ کننده‌ای از اطلاعات است.

We will have to capture the light from an enormous amount of cameras

باید نور را تعداد بی‌شماری دوربین دریافت کنیم

to create this information.

تا این اطلاعات را ایجاد کنیم.

Now, in order to do such a thing,

برای انجام چنین کاری،

we would need a setup that would host a numerous amount of cameras

نیاز به ترکیبی داریم که بتوانیم تعداد بی‌شماری دوربین

installed in a stage

نصب شده در صحنه را به آن متصل کنیم

and a stage big enough in order to fit a full cinematic experience.

و صحنه‌ای که برای ایجاد تجربه سینمایی به اندازه‌ کافی بزرگ باشد.

Now that sounds like a crazy idea, but that's exactly what we did.

ممکن است فکر احمقانه‌ای به نظر برسد، اما این واقعا همان کاری است که کردیم.

For the last three years,

در سه سال اخیر،

we have been building a huge volumetric camera chamber.

ما یک فضای دوربین حجمی عظیم می‌ساختیم.

It's 10,000 square feet of a stage,

که یک صحنه با مساحت ۱۰۰۰ متر مربع است،

enabling to capture the action from any location.

که اجازه می‌دهد تا حرکت را از هر محلی ثبت کنیم.

We have deployed hundreds of cameras,

ما صد‌ها دوربین نصب کردیم،

sending a tremendous amount of information

و حجم عظیمی از اطلاعات را

to a huge data center powered by Intel supercomputers.

به دیتاسنتر بزرگی می‌فرستیم که با اَبَرکامپیوتر‌های اینتل کار می‌کند.

The ability to have this 10,000 feet

برخورداری از این ۱۰۰۰ متر

enables us to fit any kind of action,

اجازه می‌دهد تا هرکاری انجام دهیم،

any kind of performance.

هر نوع اجرایی.

It is the size of an average Broadway stage.

که به اندازه یک صحنه معمولی در برادوی است.

We call it Intel Studios,

اسمش را استودیوی اینتل گذاشته‌ایم،

and it's the largest volumetric stage in the world,

که بزرگترین صحنه حجمی در جهان است،

with the objective of enabling and exploring

با هدف ایجاد و بررسی

the next generation of this immersive media filmmaking.

نسل بعدی فیلم سازی دربرگیرنده.

Now, to test these ideas,

برای آزمایش این فکر،

we were thinking about what we can do as the first scene to try it out.

ما به دنبال این بودیم که چه صحنه‌ای را برای اولین آزمایش انتخاب کنیم.

So we chose the Western scene.

و ما یک صحنه وسترن انتخاب کردیم.

We brought horses, set designers, dirt,

اسب آوردیم، طراحی صحنه، گل و خاک،

everything needed to create the full scene of a Western.

هرچیزی که برای خلق یک صحنه کامل وسترن لازم داشتیم.

But this time, there was no camera inside.

ولی این بار دوربینی داخل صحنه نبود.

There was nothing really moving besides all the cameras

چیزی واقعا حرکت نمی‌کرد چون همه دوربین‌ها

installed outside.

بیرون نصب شده بودند.

The challenge of the actors was tremendous.

هنرپیشه‌ها با چالشی بزرگ مواجه بودند.

They have to perform a flawless action visible from all the directions.

باید اجرایی بدون نقص و قابل دیدن از همه زوایا می‌داشتند.

There's no possibility to hide a punch or not show the action.

ممکن نیست که یک مشت را مخفی کرد یا حرکتی را نشان نداد.

Everything is captured and everything is seen.

همه چیز ثبت می‌شود و همه چیز دیده می‌شود.

The output of the capture --

خروجی ثبت --

this is our future capture --

این ثبت آینده ماست --

opened our eyes for the immense capabilities.

که چشم ما را بر گستره‌ای از توانایی‌ها باز کرد.

It was like a full 3D scan of the entire scene.

کاری شبیه به اسکن سه بعدی کل صحنه.

We were able to move around and travel in the space.

می‌توانستیم در اطراف جابجا شویم و در فضا حرکت کنیم.

The thing about this,

چیزی که بود،

it's not anymore about perceiving the light emitted from a screen

دیگر ربطی به دریافت نوری که از صحنه می‌تابید نداشت

but now traveling inside the light,

بلکه حالا حرکت در داخل نور بود،

traveling inside the scene.

حرکت در درون صحنه.

This obviously opens possibilities for an enormous amount

مشخص است که این شیوه امکاناتی بی‌شماری را

of storytelling and methodologies of creation.

برای داستان سرایی و روش‌های تولید فراهم می‌سازد

This is the possibilities of your personal narrative,

می‌توانید روایت شخصی‌تان را نقل کنید،

the possibility of creating your own story inside,

امکان خلق داستان خودت در داخلش،

or maybe following other stories.

و شاید هم به دنبال داستان‌های دیگر رفتن.

Let's take a look at one of the last renders and see.

بیایید یکی از آخرین باز تولید‌ها را ببینیم.

(Music)

(موسیقی)

What you're seeing here is full volumetric video,

چیزی که اینجا می‌بینید یک ویدیو حجمی کامل است،

and there's no physical camera in the scene.

و هیچ دوربین واقعی در صحنه نداریم.

(Music)

(موسیقی)

We have the full control

ما کنترل کامل

(Music, sounds of combat)

(موسیقی، صدای مبارزه)

of space and time.

فضا و زمان را در دست داریم.

(Music, sounds of combat)

(موسیقی، صدای مبارزه)

Now, again, no physical camera was here.

دوباره بگویم، هیچ دوربین واقعی اینجا نداریم.

Everything was captured surrounding.

همه چیز از اطراف ضبط شده.

Now, this is very nice,

این خیلی خوب است،

but what if we wanted to see the scene, maybe, from the eyes of the horse?

اما چه می‌شد اگر می‌خواستیم صحنه را، مثلا از چشم اسب ببینیم؟

Well, we can do that as well.

خوب، می‌شود این کار را هم کرد،.

(Horse galloping)

(اسب می‌تازد)

So what you're seeing right now is the same action,

چیزی که الان می‌بینید همان صحنه است،

but this time, we're watching exactly from the eyes of the horse.

اما این بار، ما دقیقا از چشمان اسب نگاه می‌کنیم.

The possibilities are, well, unlimited.

خوب، امکانات حالا نامحدود است.

(Applause)

(تشویق حضار)

Thank you.

متشکرم.

(Applause)

(تشویق حضار)

So this is all great for creators and storytellers.

خوب اینها برای تولید کننده و داستان‌سرا عالی است.

It really opens a huge canvas

حقیقتا یک بوم عظیم نقاشی را ایجاد می‌کند

for a different type of storytelling and moviemaking.

برای نوع دیگری از داستان‌سرایی و فیلم سازی.

But what about the audience?

اما مخاطبان چطور؟

How can the audience experience this differently?

مخاطبان سینما چه تجربه متفاوتی خواهند داشت؟

In order to [create] our explorations,

برای [خلق] اکتشافاتمان،

we partnered with Paramount Pictures

با پارامونت مشارکت کردیم

in order to explore immersive media in a Hollywood movie production.

تا استفاده از رسانه دربرگیرنده را در تولید یک فیلم بررسی کنیم.

Together with the director Randal Kleiser,

همراه با کارگردان این فیلم راندال کلایسر،

we reimagined the iconic movie of 1978,

یک اثر نمادین سال ۱۹۸۷ بازآفرینی کردیم،

"Grease."

«گریس».

Some of you know it, some of you don't.

بین شما بعضی‌ها آن را می‌شناسند، بعضی نه.

A 40-year-old movie, amazing experience.

یک فیلم ۴۰ ساله، تجربه‌ای شگفت‌انگیز.

And our goal was really to look at how we can take this iconic action and dance

و هدف ما این بود که ببینیم که چطور می‌توانیم این اثر پر از حرکت و رقص را

and bring it deeper into the experience,

تبدیل به تجربه‌ای عمیق‌تر کنیم،

bring it deeper into the audience.

و مخاطب را در آن عمیق‌تر فرو ببریم.

Imagine that you can not just watch the movie

تصور کن که نه تنها می‌توانی فیلم را ببینی

but get inside it and dance with the actors

بلکه بتوانی داخلش بروی و با هنرپیشه‌ها برقصی

and dance with the performance.

برقصی و اجرا کنی.

Now we're breaking, really, the traditional 2D mindset of thinking,

اینجا ما، واقعا، تصور دو بعدی سنتی را می‌شکنیم،

and bringing a much richer possibility of moviemaking

و امکاناتی بسیار غنی‌تر در فیلم‌سازی

and content creation.

و تولید محتوی ایجاد می‌کنیم.

But why watch it on the screen?

اما چرا آن را روی صفحه ببینیم؟

Let's try to bring these actors here on the stage.

بگذارید این هنرپیشه‌ها را اینجا روی صحنه بیاوریم.

So they're not going to really come --

البته واقعا خودشان اینجا نمی‌آیند --

I'm going to use an iPad.

من از یک آی‌پد استفاده می‌کنم.

(Laughter)

(خنده حضار)

Sorry.

ببخشید.

I'm going to use an iPad in order to bring in augmented reality.

از یک آی‌پد استفاده می‌کنم تا واقعیت افزوده را ایجاد کنم.

Now, obviously, these devices have their own limitations

معلوم است که این ابزار‌ها محدودیت‌های خودشان را دارند

in terms of the data-computing process,

از لحاظ توانایی پردازش اطلاعات،

so we have to reduce the amount of resolution.

پس باید میزان جزئیات را کم کنیم.

So what I'm doing now, I'm placing here a marker,

پس کاری که الان می‌کنم، اینجا یک نشانه می‌گذارم،

so I'll be able to position exactly where I want everyone to appear.

پس می‌توانم دقیقا مشخص کنم که آنها کجا ظاهر بشوند.

OK.

بسیار خوب.

I think we have them here.

فکر کنم اینجا هستند.

(Applause)

(تشویق حضار)

John Travolta, or --

جان تراولتا، یا --

(Laughter)

(خنده حضار)

a version of him.

نسخه‌ای از او.

Let's take a look.

بگذارید ببینیم.

(Video) Female: Hey.

(ویدیو) زن: هِی.

Male: And that is how it's done.

مرد: اینطوری انجامش می‌دهند.

Female: Your turn.

زن: نوبت توست.

Male: Hey, guys! Check this out.

مرد: بچه‌ها! این رو ببینید.

(Song: "You're the one that I want")

(ترانه:«تو همانی هستی که می‌خواهم»)

Danny: Sandy!

دنی: سندی!

Sandy: Tell me about it, stud.

سندی: راست می‌گی، خوشتیپ.

(Singing) I got chills. They're multiplying

(آواز) تعجب کردم، چطور چند‌تا شدند

And I'm losing control

کنترل از دستم رفت

'Cause the power you're supplying

چون قدرتی که می‌دهی

It's electrifying!

آدم رو برق‌زده می‌کنه!

(Video ends)

(پایان ویدیو)

(Applause and cheers)

(تشویق و جیغ)

Diego Prilusky: Thank you.

دیگو پریلوسکی: متشکرم

(Applause and cheers)

(تشویق و جیغ)

So as you can see,

پس می‌بینید،

we can watch and experience content in the traditional way

که می‌توانیم محتوی را به شکل معمول ببینیم و تجربه کنیم

or in an immersive way.

یا به صورتی دربرگیرنده.

Really, the possibilities are open.

در واقع، محدودیتی وجود ندارد.

We're not trying to change or replace movies.

تلاش ما تغییر یا جایگزین کردن فیلم نیست.

We're enhancing them.

ما آنها را گسترش می‌دهیم.

The technologies enable new possibilities to start thinking beyond the flat screen.

این فناوری‌‌ها امکاناتی ایجاد می‌کند تا بتوانیم به ورای صفحه تخت فکر کنیم.

We're in immersive and really exciting times in filmmaking.

ما در دورانی واقعا هیجان انگیز در ساخت و فیلم‌های دربرگیرنده به سر می‌بریم.

We're at the threshold of a new era.

ما در آستانه دوران جدیدی هستیم.

We're opening the gates for new possibilities

دروازه‌ها را برای امکانات جدید

of immersive storytelling,

داستان سرایی دربرگیرنده ،

and exploration and defining what immersive media filmmaking means.

و اکتشاف و تعیین آنکه فیلم‌سازی دربرگیرنده به چه معنی است باز می‌کنیم.

We're really just at the beginning,

ما واقعا در آغاز راهیم،

and we invite you all to join us.

و از همگی شما دعوت می‌کنیم تا به ما بپیوندید.

Thank you.

متشکرم.

(Applause)

(تشویق حضار)