Jared Ficklin: New ways to see music (with color! and fire!)

جارد فیکلین : راه های جدید برای دیدن موسیقی (با رنگ و آتش!)

Translator: Joseph Geni Reviewer: Morton Bast

Translator: soheila Jafari Reviewer: Bidel Akbari

My passions

اشتیاق من موسیقی، تکنولوژی و ساختن چیزهاست.

are music, technology and making things.

اشتیاق من موسیقی، تکنولوژی و ساختن چیزهاست.

And it's the combination of these things

و ترکیبی از این چیزهاست که منجر شد من به کار ذوقی تجسم صدا،

that has led me to the hobby of sound visualization,

و ترکیبی از این چیزهاست که منجر شد من به کار ذوقی تجسم صدا،

and, on occasion, has led me to play with fire.

و برخی مواقع به بازی با آتش مشغول شوم.

This is a Rubens' tube. It's one of many I've made over the years,

این لوله رابین است. این یکی از چندتایی است که در طی سال‌های گذشته ساخته ام،

and I have one here tonight.

و امشب یکی از آنها را با خودم آورده‌ام.

It's about an 8-foot-long tube of metal,

این یه لوله فلزیه که حدود ۸ فوت طول داره،

it's got a hundred or so holes on top,

و بالاش حدود صد سوراخ داره،

on that side is the speaker, and here

در طرف دیگر بلندگو است،

is some lab tubing, and it's connected to this tank

و در اینجا مقداری لوله ازمایشگاه هست، و این به کپسول گاز پروپان وصل شده.

of propane.

و در اینجا مقداری لوله ازمایشگاه هست، و این به کپسول گاز پروپان وصل شده.

So, let's fire it up and see what it does.

پس بیاید روشنش کنیم و ببینیم که چیکار میکنه.

So let's play a 550-herz frequency

خُب حالا اجازه دهید که صدایی با فرکانس ۵۵۰ هرتز پخش کنیم و بینیم که چه اتفاقی میفته.

and watch what happens.

خُب حالا اجازه دهید که صدایی با فرکانس ۵۵۰ هرتز پخش کنیم و بینیم که چه اتفاقی میفته.

(Frequency)

( فرکانس صدا)

Thank you. (Applause)

سپاسگزارم. ( تشویق تماشاگران)

It's okay to applaud the laws of physics,

تشویق کردن قوانین فیزیک اشکالی نداره، اما اساسا آنچه که اینجا اتفاق میفته

but essentially what's happening here

تشویق کردن قوانین فیزیک اشکالی نداره، اما اساسا آنچه که اینجا اتفاق میفته

-- (Laughter) --

-- ( خنده تماشاگران) --

is the energy from the sound via the air and gas molecules

اینه که انرژی [تولید شده] از صدا از طریق هوا و مولکولهای گاز

is influencing the combustion properties of propane,

بر خواص احتراق پروپان اثر میگذارند،

creating a visible waveform,

که موج قابل مشاهده ای را ایجاد میکنه،

and we can see the alternating regions of compression

و میتونیم مناطق متناوب به هم فشرده و از هم باز شده که ما به آن فرکانس میگویم را ببینیم،

and rarefaction that we call frequency,

و میتونیم مناطق متناوب به هم فشرده و از هم باز شده که ما به آن فرکانس میگویم را ببینیم،

and the height is showing us amplitude.

وارتفاع آن به ما دامنه (صوت) را نشان میدهد.

So let's change the frequency of the sound,

خُب اجازه دهید فرکانس صدا را تغییر دهیم،

and watch what happens to the fire.

و ببینید آتش چطوری میشه.

(Higher frequency)

( فرکانس بالاتر)

So every time we hit a resonant frequency we get a standing wave

خُب هر بار ما فرکانس طنین داری پخش میکنیم، یک موج ایستاده

and that emergent sine curve of fire.

ومنحنی‌ای سینوسی ناشی از آتش دریافت میکینم.

So let's turn that off. We're indoors.

اجازه بدید این را خاموش کنم. [چون] ما داخل اتاق هستیم.

Thank you. (Applause)

سپاسگزارم. ( تشویق تماشاگران)

I also have with me a flame table.

من با خودم یک میز شعله هم دارم.

It's very similar to a Rubens' tube, and it's also used

این خیلی شبیه به لوله رابینزه،

for visualizing the physical properties of sound,

و همچنین برای تجسم سازی ویژگیهای صدا مورد استفاده قرار میگیره،

such as eigenmodes, so let's fire it up

مثل حالت ارتعاشی از یک سیستم مکانیکی که در آن فرکانس ارتعاش در تمام جهات یکسانه، اجازه بدید این را روشن کنیم

and see what it does.

و ببینیم چیکار میکنه.

Ooh. (Laughter)

اوه. ( خنده تماشاگران)

Okay. Now, while the table comes up to pressure,

بسیار خوب، در حالی که فشار در این میز بالا میاد،

let me note here that the sound is not traveling

بگذارید به شما بگم که صدا در یک مسیر خطی و یکسان حرکت نمیکنه.

in perfect lines. It's actually traveling in all directions,

در واقع در همه جهت‌ها حرکت میکنه،

and the Rubens' tube's a little like bisecting those waves

و مثل این میمونه که لوله رابینز امواج را با یک خط به دو بخش تقسیم کرده باشه،

with a line, and the flame table's a little like

و میز شعله کمی شبیه تقسیم امواج به یک صفحه میمونه، این میتونه پیچیدگیهای ظریف تری را نشون بده.

bisecting those waves with a plane,

و میز شعله کمی شبیه به تقسیم امواج به یک صفحه میمونه، این میتونه پیچیدگیهای ظریف تری را نشون بده.

and it can show a little more subtle complexity, which is why

و میز شعله کمی شبیه به تقسیم امواج به یک صفحه میمونه، این میتونه پیچیدگیهای ظریف تری را نشون بده.

I like to use it to watch Geoff Farina play guitar.

و به همین دلیله که من دوست دارم از این برای تماشای گیتارنواختن جف فرینا استفاده کنم.

(Music)

( موسیقی)

All right, so it's a delicate dance.

بسیار خوب، این رقص ظریفیست.

If you watch closely — (Applause)

اگر از نزدیک تماشا کنید -- (تشویق حاضرین)

If you watch closely, you may have seen

اگر از نزدیک تماشا کنید، شاید بتونید حالت ارتغاشی فرکانس اون رو ببینید،

some of the eigenmodes, but also you may have seen

اگر از نزدیک تماشا کنید، شاید بتونید حالت ارتغاشی فرکانس اون رو ببینید،

that jazz music is better with fire.

همینطور ممکنه ببینید که موسیقی جاز با آتش جور درمیاد.

Actually, a lot of things are better with fire in my world,

در واقع، در دنیای من چیزهای زیادی با آتش جور درمیاد،

but the fire's just a foundation.

اما آتش فقط یک پایه و فونداسیون است.

It shows very well that eyes can hear,

این به خوبی نشان میدهد که چشم میتواند بشنود،

and this is interesting to me because

و این برای من بسیار جالبه

technology allows us to present sound to the eyes

زیرا تکنولوژی به ما امکان نمایش دادن موسیقی به چشم‌ها

in ways that accentuate the strength of the eyes

با تاکید و تکیه بر توانایی چشم‌ها بر دیدن صدا رو میده،

for seeing sound, such as the removal of time.

مثل حذف کردن زمان.

So here, I'm using a rendering algorithm to paint

در اینجا من از یک الگوریتم برای رسم

the frequencies of the song "Smells Like Teen Spirit"

فرکانس صدای ترانه "Smells Like Teen Spirit" استفاده کردم

in a way that the eyes can take them in

به شکلی که چشمها بتوانند آن را به عنوان اثری فقط بصری ببینند، و این تکنیک

as a single visual impression, and the technique

به شکلی که چشمها بتوانند آن را به عنوان اثری فقط بصری ببینند، و این تکنیک

will also show the strengths of the visual cortex

همچنین، نقاط قوت قشر بینایی [مغز] در تشخیص الگو رو نمایان میکنه.

for pattern recognition.

همچنین، نقاط قوت قشر بینایی [مغز] در تشخیص الگو رو نمایان میکنه.

So if I show you another song off this album,

بنابراین اگر من به شما یکی دیگر از آهنگ‌های این آلبوم را نشان دهم،

and another, your eyes will easily pick out

و [حتی] یکی دیگر، چشم‌های شما به راحتی استفاده از تکرار توسط گروه نیروانا را متوجه میشه،

the use of repetition by the band Nirvana,

و [حتی] یکی دیگر، چشم‌های شما به راحتی استفاده از تکرار توسط گروه نیروانا را متوجه میشه،

and in the frequency distribution, the colors,

و در توزیع فرکانس، رنگها،

you can see the clean-dirty-clean sound

شما میتوانید صدای تمیز-کثیف-تمیز را که آنها به آن معروفند را ببینید،

that they are famous for,

شما میتوانید صدای تمیز-کثیف-تمیز را که آنها به آن معروفند را ببینید،

and here is the entire album as a single visual impression,

و این نشاندهنده تمام آلبوم به عنوان یک اثر بصری منفرد می باشد،

and I think this impression is pretty powerful.

و من فکر می کنم این اثر بسیار قویست.

At least, it's powerful enough that

حداقل، این به اندازه‌ای قویه

if I show you these four songs,

که اگر من به شما این چهار آهنگ رو نشون بدم،

and I remind you that this is "Smells Like Teen Spirit,"

و خاطر نشان میکنم که این ترانه "Smells Like Teen Spirit" است،

you can probably correctly guess, without listening

شما ممکنه بدون گوش کردن به موسیقی به درستی حدس بزنید

to any music at all, that the song

شما ممکنه بدون گوش کردن به موسیقی به درستی حدس بزنید

a die hard Nirvana fan would enjoy is this song,

که آهنگی که یه طرفدار کشته مرده گروه نیروانا دوست خواهد داشت،

"I'll Stick Around" by the Foo Fighters,

این آهنگ "I'll Stick Around" از گروه فوفایتره،

whose lead singer is Dave Grohl,

که خواننده اصلی آن دیوید گرول،

who was the drummer in Nirvana.

که نواازنده درام گروه نیروانا بوده.

The songs are a little similar, but mostly

این ترانها کمی مشابهند،

I'm just interested in the idea that someday maybe

اما من بیشتر به این ایده علاقه دارم که شاید روزی

we'll buy a song because we like the way it looks.

ما یه ترانه را بخریم فقط به دلیل اینکه تصویرش رو دوست داریم.

All right, now for some more sound data.

بسیار خُب، حالا برای نشون دادن اطلاعات بیشتری از صدا.

This is data from a skate park,

این اطلاعات مربوط به پارک اسکیت بازیه،

and this is Mabel Davis skate park

این پارک اسکیت مابل دیویس در آستین تگزاس هست.( صدای اسکیت بُرد)

in Austin, Texas. (Skateboard sounds)

این پارک اسکیت مابل دیویس در آستین تگزاس هست.( صدای اسکیت بُرد)

And the sounds you're hearing came from eight

و صداهایی را که میشنوید از هشت تا میکروفونی است روی مانع‌ها در اطراف پارک نصب شدند،

microphones attached to obstacles around the park,

و صداهایی را که میشنوید از هشت تا میکروفونی است روی مانع‌ها در اطراف پارک نصب شدند،

and it sounds like chaos, but actually

این صدا بیشتر شبیه صدای هرج و مرجه، ولی در واقع

all the tricks start with a very distinct slap,

همه حرکات [اسکیت بازها] با [صدای] ضربه ای سریع شروع میشن،

but successful tricks end with a pop,

اما در نهایت حرکت‌های موفق با صدای پریدن تموم میشن،

whereas unsuccessful tricks

در حالیکه صدای حرکات ناموفق بیشتر شبیه صدای خراش و افتادن ناگهانیه،

more of a scratch and a tumble,

در حالیکه صدای حرکات ناموفق بیشتر شبیه صدای خراش و افتادن ناگهانیه،

and tricks on the rail will ring out like a gong, and

و حرکات بر روی ریل زنگی مثل صدای ناقوس دارن،

voices occupy very unique frequencies in the skate park.

و صداها فرکانس بسیار منحصر بفردی در پارک اسکیت دارند.

So if we were to render these sounds visually,

اگر ما این صداها را به تصویر بکشیم،

we might end up with something like this.

ممکنه به چیزی شبیه به این برسیم.

This is all 40 minutes of the recording,

این همه‌ی ۴۰ دقیقه از صداهای ظبط شده است،

and right away the algorithm tells us

و بلافاصله الگوریتم به ما میگه که

a lot more tricks are missed than are made,

حرکت‌های ناموفق [اسکیت بازان] بیشتر از حرکات موفق آنها بوده،

and also a trick on the rails is a lot more likely

و همچنین حرکات موفقی که بر روی ریل زده میشن

to produce a cheer, and if you look really closely,

بیشتر باعث تشویق شدن [اسکیت باز] میشه، و اگر با دقت نگاه کنید،

we can tease out traffic patterns.

میتونیم الگوهای رفت و آمد را بزرگ کنیم.

You see the skaters often trick in this direction. The obstacles are easier.

می بینید که اسکیت بازان اغلب در این جهت حرکت میزنند. موانع در اینجا آسون تره.

And in the middle of the recording, the mics pick this up,

و در اواسط ظبط، میکروفن‌ها این را ضبط کردند،

but later in the recording, this kid shows up,

اما بعدتر در خلال ضبط، این بچه پیداش شد،

and he starts using a line at the top of the park

و برای انجام یه حرکت بسیار پیشرفته که بهش ریل بلند میگن، شروع کرد به استفاده کردن از یه خط در بالای پارک.

to do some very advanced tricks on something

و برای انجام یه حرکت بسیار پیشرفته که بهش ریل بلند میگن، شروع کرد به استفاده کردن از یه خط در بالای پارک.

called the tall rail.

و برای انجام یه حرکت بسیار پیشرفته که بهش ریل بلند میگن، شروع کرد به استفاده کردن از یه خط در بالای پارک.

And it's fascinating. At this moment in time,

این بسیار جالبه. در ان لحظه از زمان،

all the rest of the skaters turn their lines 90 degrees

همه اسکیت بازان خطشون را ۹۰ درجه تغییر دادند که از مسیر او خارج شوند.

to stay out of his way.

همه اسکیت بازان خطشون را ۹۰ درجه تغییر دادند که از مسیر او خارج شوند.

You see, there's a subtle etiquette in the skate park,

میبینید که قوانین ظریف و نامحسوسی در پارک وجود داره،

and it's led by key influencers,

و اون [قوانین] توسط اسکیت بازان برتر وضع میشه،

and they tend to be the kids who can do the best tricks,

و اونها بیشتر بچه‌هایی هستن که بهترین حرکات رو میزنن،

or wear red pants, and on this day the mics picked that up.

یا شلوار قرمز میپوشن، و در روز صدابرداری میکروفون‌ها آنرا ضبط کردند.

All right, from skate physics to theoretical physics.

بسیار خوب، از فیزیک اسکیت به فیزیک نظری و یا تئوری برویم.

I'm a big fan of Stephen Hawking,

من یک طرفدار پرو پا قرض استیفان هاکینگ هستم.

and I wanted to use all eight hours

و خواستم که از تمامی هشت ساعت مجموعه سخنرانیهایش

of his Cambridge lecture series to create an homage.

در کیمبریج برای ساختن چیزی به عنوان تجلیل از او استفاده کنم.

Now, in this series he's speaking with the aid of a computer,

در این مجموعه او با کمک کامپیوتر صحبت میکنه،

which actually makes identifying the ends of sentences

که در واقع تشخیص پایان هر جمله را خیلی آسون میکنه.

fairly easy. So I wrote a steering algorithm.

تقریبا آسون. بنابراین من یک الگوریتم هدایت کننده نوشتم.

It listens to the lecture, and then it uses

اون [الگوریتم] به سخنرانی کوش میده، و سپس

the amplitude of each word to move a point on the x-axis,

از دامنه هریک از کلمات برای حرکت دادن یک نقطه بر روی محور X استفاده میکنه،

and it uses the inflection of sentences

و از تغییرات لحن جملات برای حرکت دادن همان نقطه بر روی محور Y استفاده میکنه.

to move a same point up and down on the y-axis.

و از تغییرات لحن جملات برای حرکت دادن همان نقطه بر روی محور Y استفاده میکنه.

And these trend lines, you can see, there's more questions

و از روند و حرکت این خطوط میتونید ببینید، در قوانین فیزیک تعداد سوال‌ها بیشتر از جواب‌ها است،

than answers in the laws of physics,

و از روند و حرکت این خطوط میتونید ببینید، در قوانین فیزیک تعداد سوال‌ها بیشتر از جواب‌ها است،

and when we reach the end of a sentence,

و هنگامی که به پایان جمله میرسیم، یک ستاره در آن محل قرار میدیم.

we place a star at that location.

و هنگامی که به پایان جمله میرسیم، یک ستاره در آن محل قرار میدیم.

So there's a lot of sentences, so a lot of stars,

جملات زیادی وجود دارد، بنابر این ستارهای زیادی هم هست،

and after rendering all of the audio, this is what we get.

و بعد از تبدیل کردن همه این صدا ها، این چیزیه که ما بدست آوردیم.

This is Stephen Hawking's universe.

و این جهان استیفان هاکینگ است.

(Applause)

( تشویق تماشاگران)

It's all eight hours of the Cambridge lecture series

این همه مجموعه هشت ساعت سخنرانی کیمبریج است

taken in as a single visual impression,

که به عنوان یک اثر قابل دیدن بصری در نظر گرفته شده،

and I really like this image,

من واقعا این تصویر را دوست دارم،

but a lot of people think it's fake.

اما خیلی از مردم فکر میکنند که این مصنوعیه.

So I made a more interactive version,

بنابر این من نسخه ای تعاملی تری درست کردم،

and the way I did that is I used their position in time

و شیوه ای که برای این استفاده کردم این بود که محل ستاره ها را درزمان سخنرانی در فضای سه بعدی گذاشتم،

in the lecture to place these stars into 3D space,

و شیوه ای که برای این استفاده کردم این بود که محل ستاره ها را درزمان سخنرانی در فضای سه بعدی گذاشتم،

and with some custom software and a Kinect,

و با چند نرم افزار ساخته شده برای این منظور و یک کینکت (دستگاهی برای سنجش حرکت)،

I can walk right into the lecture.

من میتونم به داخل سخنرانی بروم.

I'm going to wave through the Kinect here

میخواهم اینجا برای کینکت دست تکان بدهم

and take control, and now I'm going to reach out

و کنترل آن را به دست بگیرم، و حالا میخوام دستم رو دراز کنم

and I'm going to touch a star, and when I do,

و یک ستاره را لمس کنم، و وقتی که اینکار را میکنم،

it will play the sentence

میخواهم جمله‌ای که اون ستاره رو ساخته پخش کنم.

that generated that star.

میخواهم جمله‌ای که اون ستاره رو ساخته پخش کنم.

Stephen Hawking: There is one, and only one, arrangement

استفان هاکینگ: فقط و فقط یک آرایش وجود داره

in which the pieces make a complete picture.

که در آن همه جزئیات تصویر کاملی رو میسازند.

Jared Ficklin: Thank you. (Applause)

جارد فیکلین: سپاسگزارم. ( تشویق تماشاگران)

There are 1,400 stars.

در اینجا ۱۴۰۰ ستاره هست.

It's a really fun way to explore the lecture,

این شیوه بسیار لذت بخشی برای گشت و گذار کردن در سخنرانیه،

and, I hope, a fitting homage.

و امیدوارم که ادای احترام مناسبی باشه.

All right. Let me close with a work in progress.

بسیار خوب، اجازه بدید این سخنرانی رو با کاری که هنوز نیمه تمومه تموم کنم.

I think, after 30 years, the opportunity exists

فکر کنم بعد از سی سال، هنوز برای ساختن نسخه بهتری از زیرنویس مجالی وجود داشته باشه.

to create an enhanced version of closed captioning.

فکر کنم بعد از سی سال، هنوز برای ساختن نسخه بهتری از زیرنویس مجالی وجود داشته باشه.

Now, we've all seen a lot of TEDTalks online,

همه ما تعداد زیادی سخنرانی تد را بصورت آنلاین دیده ایم،

so let's watch one now with the sound turned off

اجازه دهید یکی از آنها را بدون صدا

and the closed captioning turned on.

و با زیرنویس ببینیم.

There's no closed captioning for the TED theme song,

برای آهنگ پس زمینه تد هیچ متنی بر روی صفحه وجود نداره،

and we're missing it, but if you've watched enough of these,

بنابراین زیرنویسی اینجا نداریم، اما اگر به اندازه کافی از اینها دیده باشید،

you hear it in your mind's ear,

اون رو درگوش ذهنتان خواهید شنید،

and then applause starts.

و سپس دست زدن شروع میشود.

It usually begins here, and it grows and then it falls.

این معمولا از اینجا شروع میشود، اوج میگیره و بعدش تنزل میکنه.

Sometimes you get a little star applause,

بعضی وقت‌ها تشویق‌های طولانی مدتی برای یه آدم معروف اتفاق میافته،

and then I think even Bill Gates takes a nervous breath,

و من فکر می کنم حتی بیل گیتس هم نفسی از روی نگرانی میکشه،

and the talk begins.

و بعد سخنرانی شروع میشه .

All right, so let's watch this clip again.

بسیار خوب، اجازه دهید این کلیپ را دوباره ببینیم.

This time, I'm not going to talk at all.

این بار اصلا حرفی نخواهم زد.

There's still going to be no audio,

دوباره صدایی در کار نخواهد بود.

but what I am going to do is I'm going to render the sound

اما کاری که میخوام بکنم اینه که میخوام صدا رو بصورت همزمان

visually in real time at the bottom of the screen.

بصورت بصری در پایین صفحه نمایش نشان بدهم.

So watch closely and see what your eyes can hear.

بنابراین با دقت نگاه کنید و آنچه را که چشمانتان میتواند بشنود را ببینید.

This is fairly amazing to me.

این برای من نسبتا شگفت انگیزه.

Even on the first view, your eyes will successfully

حتی در اولین نگاه، چشمان شما با موفقیت متوجه الگوها میشه،

pick out patterns, but on repeated views,

اما در صورت دیدن تکراری آنها،

your brain actually gets better

مغز شما در تبدیل کردن این الگوها به اطلاعات ماهرتر میشه.

at turning these patterns into information.

مغز شما در تبدیل کردن این الگوها به اطلاعات ماهرتر میشه.

You can get the tone and the timbre

میتونید تون صدا، زنگ صدا و سرعت سخنرانی را متوجه بشوید،

and the pace of the speech,

میتونید تون صدا، زنگ صدا و سرعت سخنرانی را متوجه بشوید،

things that you can't get out of closed captioning.

اینها چیزهایی هستند که شما نمیتوانید با دیدن زیرنویس متوجه آنها شوید.

That famous scene in horror movies

اون صحنه مشهور در فیلم‌های ترسناک

where someone is walking up from behind

که در آن کسی از پشت نزدیک میشه

is something you can see,

چیزیه که شما میتونید ببینید،

and I believe this information would be something

من معتقدم این اطلاعات میتونه

that is useful at times when the audio is turned off

برای وقت‌هایی که صدا موجود نیست یا اصلا شنیده نمیشه مفید باشه،

or not heard at all, and I speculate that deaf audiences

و من میتونم حدس بزنم که مخاطبین ناشوا

might actually even be better

ممکنه در واقع بتونن صداها رو بهتر از تماشاگرانی که صداها رو گوش میدن، ببینند.

at seeing sound than hearing audiences.

ممکنه در واقع بتونن صداها رو بهتر از تماشاگرانی که صداها رو گوش میدن، ببینند.

I don't know. It's a theory right now.

نمیدونم. فعلا این یک نظریه است.

Actually, it's all just an idea.

درواقع این فقط یه ایده است.

And let me end by saying that sound moves in all directions,

اجازه دهید با گفتن اینکه ایده‌ها هم مثل صدا در تمامی جهات حرکت میکنند، بحث رو تموم کنم.

and so do ideas.

اجازه دهید با گفتن اینکه ایده‌ها هم مثل صدا در تمامی جهات حرکت میکنند، بحث رو تموم کنم.

Thank you. (Applause)

سپاسگزارم. ( تشویق تماشاگران)