Neil Harbisson: I listen to color

Translator: Joseph Geni Reviewer: Morton Bast

번역: Seyoung Yoon 검토: Dae-won Jeong

Well, I was born with a rare visual condition

저는 전색맹이라는 희귀 질환을 가지고 태어났습니다.

called achromatopsia, which is total color blindness,

전색맹인 사람은 색깔을 전혀 구분할 수 없습니다. 때문에 저는

so I've never seen color,

지금까지 단 한 번도 색깔을 본 적이 없고

and I don't know what color looks like,

색깔이 어떤 건지도 모릅니다.

because I come from a grayscale world.

저에겐 모든 것이 흑백입니다.

To me, the sky is always gray,

하늘도 항상 흑백이고

flowers are always gray,

꽃들도 항상 흑백이고

and television is still in black and white.

TV도 제겐 여전히 흑백입니다.

But, since the age of 21,

하지만 21세 때부터 전

instead of seeing color, I can hear color.

색깔을 눈으로 보는 대신 귀로 듣기 시작했습니다.

In 2003, I started a project

2003년에 저는 컴퓨터 과학자인 Adam Montandon과 함께

with computer scientist Adam Montandon,

한 프로젝트를 시작했는데

and the result, with further collaborations

슬로베니아의 Peter Kese와

with Peter Kese from Slovenia

바르셀로나의 Matias Lizana의 도움을 받아

and Matias Lizana from Barcelona,

이 '전자 눈'을 만드는 것을

is this electronic eye.

성공했습니다.

It's a color sensor that detects

이 전자 눈은 색의 주파수를 감지해

the color frequency in front of me — (Frequency sounds) —

제 앞에 어떤 색이 있는지 알아 맞출 수 있습니다. (주파수 소리)

and sends this frequency to a chip installed

감지된 주파수가 제 머리 뒤에 장착된

at the back of my head, and I hear the color in front of me

칩으로 전달되면 골전도 방식으로

through the bone, through bone conduction.

제가 보고 있는 색의 소리를 들을 수 있는 것입니다.

(Frequency sounds) So, for example, if I have, like —

(주파수 소리) 예를 들어

This is the sound of purple. (Frequency sounds)

이건 보라색의 소리입니다. (주파수 소리)

For example, this is the sound of grass. (Frequency sounds)

이건 풀색의 소리이고요. (주파수 소리)

This is red, like TED. (Frequency sounds)

이건 TED처럼 빨간색의 소리입니다. (주파수 소리)

This is the sound of a dirty sock. (Laughter)

이건 더러운 양말의 소리입니다. (웃음)

Which is like yellow, this one.

노란색 양말이군요.

So I've been hearing color all the time for eight years,

저는 2004년부터 8년간 계속해서 색의 소리를 들어왔습니다.

since 2004, so I find it completely normal now

때문에 저에게 '색의 소리'는 언제나 존재하는,

to hear color all the time.

지극히 일상적인 것입니다.

At the start, though, I had to memorize the names you give

처음에는 색의 이름과 소리를 의식적으로 외우고 서로 연결시켜야 했지만

for each color, so I had to memorize the notes,

시간이 지나면서

but after some time, all this information

이 모든 정보를

became a perception.

자연스럽게 지각하게 됐습니다.

I didn't have to think about the notes.

더 이상 의식적으로 생각하지 않아도 됐고

And after some time, this perception became a feeling.

좀 더 지난 뒤에는 실제로 색을 느낄 수 있게 됐습니다.

I started to have favorite colors,

저는 특정 색을 선호하기 시작했고

and I started to dream in colors.

꿈에서도 색을 인지하기 시작했습니다.

So, when I started to dream in color is when I felt

제가 꿈에서 색을 인지한다는 것은 전자 눈의 소프트웨어와 저의 뇌가

that the software and my brain had united,

하나로 통합됐다는 것을 의미합니다.

because in my dreams, it was my brain creating

꿈에선 소프트웨어가 아닌 제 뇌가

electronic sounds. It wasn't the software,

색의 소리를 만들어내기 때문입니다.

so that's when I started to feel like a cyborg.

이 때부터 전 마치 사이보그와 같은 존재가 됐습니다.

It's when I started to feel that the cybernetic device

전자 눈를 더 이상 외부 기기로 보지 않고

was no longer a device.

제 몸의 일부이자

It had become a part of my body,

제 감각의 연장선으로

an extension of my senses,

생각하기 시작한 것입니다.

and after some time, it even became a part

전 전자 눈이 저의 일부라는 것을

of my official image.

공식적으로 인정받기도 했습니다.

This is my passport from 2004.

이건 2004년에 찍은 제 여권입니다.

You're not allowed to appear on U.K. passports

영국에서는 여권 사진에

with electronic equipment, but I insisted

전자 기기가 보이면 안됩니다.

to the passport office that what they were seeing

하지만 여권 발급기관에 가서 제 전자 눈은

was actually a new part of my body,

단순히 전자 기기가 아니라 제 몸의 일부분이자

an extension of my brain, and they finally accepted me

제 뇌의 연장선에 있는 것이라고 말했더니 결국

to appear with the passport photo.

이 사진을 사용하는 것을 허가해줬습니다.

So, life has changed dramatically since I hear color,

색을 듣기 시작한 이후부터 제 삶엔 큰 변화가 생겼습니다.

because color is almost everywhere,

색은 거의 모든 곳에 존재하기 때문입니다.

so the biggest change for example is

예를 들어 미술관에 가서

going to an art gallery, I can listen to a Picasso,

피카소의 작품을 구경하면

for example. So it's like I'm going to a concert hall,

마치 콘서트에 온 듯한 느낌이 듭니다.

because I can listen to the paintings.

저는 그림의 소리를 듣기 때문입니다.

And supermarkets, I find this is very shocking,

이건 슈퍼마켓에서도 마찬가지입니다.

it's very, very attractive to walk along a supermarket.

슈퍼마켓 안에서 걸어다니면 마치 나이트클럽에 온 듯한

It's like going to a nightclub.

기분이 듭니다.

It's full of different melodies. (Laughter) Yeah.

엄청나게 다양한 멜로디를 들을 수 있죠. (웃음)

Especially the aisle with cleaning products.

슈퍼마켓 내에서도 특히

It's just fabulous. (Laughter)

청소용품 코너의 소리는 정말 대단합니다. (웃음)

Also, the way I dress has changed.

색의 소리 덕분에 옷을 입는 방식도 달라졌습니다.

Before, I used to dress in a way that it looked good.

전에는 보기 좋게 옷을 입었는데

Now I dress in a way that it sounds good. (Laughter)

이제는 듣기 좋게 옷을 입습니다. (웃음)

(Applause)

(박수)

So today I'm dressed in C major,

오늘 저는 다장조 옷을 입어서

so it's quite a happy chord. (Laughter)

쾌활한 소리가 납니다. (웃음)

If I had to go to a funeral, though,

장례식에 참석할 때에는

I would dress in B minor, which would be

나단조 옷을 입는데 색으로 따지면

turquoise, purple and orange. (Laughter)

청록색, 보라색, 그리고 주황색입니다. (웃음)

Also, food, the way I look at food has changed,

옷 뿐만 아니라 음식에 대한 생각도 달라졌습니다.

because now I can display the food on a plate,

이젠 음식을 먹을 때 제가 제일 좋아하는

so I can eat my favorite song. (Laughter)

노래를 차려 먹습니다. (웃음)

So depending on how I display it,

어떤 음식을 차리느냐에 따라 저는

I can hear and I can compose music with food.

다른 음악을 듣고 또 새로운 음악을 만들어내기도 합니다.

So imagine a restaurant where we can have, like,

이런 레스토랑을 한 번 상상해보세요.

Lady Gaga salads as starters. (Laughter) I mean,

전채 요리로 레이디 가가 샐러드가 나오는 겁니다. (웃음)

this would get teenagers to eat their vegetables, probably.

그렇다면 아마 아이들한테 채소를 먹이는 것이 더 편해지겠죠.

And also, some Rachmaninov piano concertos

주요리로는 라흐마니노프의 피아노 콘서트가 나오고

as main dishes, and some Bjork or Madonna desserts,

후식으로는 비요크나 마돈나의 노래가 나옵니다.

that would be a very exciting restaurant

노래를 실제로 먹어 볼 수 있는,

where you can actually eat songs.

아주 흥미진진한 레스토랑이 될 것입니다.

Also, the way I perceive beauty has changed,

색의 소리는 제가 아름다움을 인지하는 방식에도 영향을 미쳤습니다.

because when I look at someone, I hear their face,

저는 누군가를 바라볼 때 상대방의 얼굴에서 나오는 소리도 같이 듣는데

so someone might look very beautiful but sound terrible.

얼굴이 시각적으로는 아름다워도 청각적으로는 끔찍할 수 있기 때문입니다.

(Laughter) And it might happen the opposite,

(웃음) 정반대의 경우가 나타나기도 하고요.

the other way around. So I really enjoy creating, like,

저는 사람들의 소리로 초상화를

sound portraits of people.

만드는 것을 매우 좋아하는데

Instead of drawing someone's face, like drawing the shape,

사람의 얼굴을 그리는 대신 저는 전자 눈으로

I point at them with the eye and I write down

얼굴을 바라본 뒤 제 귀에 들리는 소리를

the different notes I hear, and then I create sound portraits.

받아 적어 소리 초상화를 만듭니다.

Here's some faces.

몇몇 예시들을 들어보겠습니다.

(Musical chords)

(소리)

Yeah, Nicole Kidman sounds good. (Laughter)

니콜 키드먼의 소리는 듣기 좋네요. (웃음)

Some people, I would never relate, but they sound similar.

어떤 사람들은 전혀 관계가 없어 보이는데도 비슷한 소리가 납니다.

Prince Charles has some similarities with Nicole Kidman.

예를 들어 찰스 왕세자와 니콜 키드먼은

They have similar sound of eyes.

눈에서 유사한 소리가 납니다.

So you relate people that you wouldn't relate,

이처럼 색의 소리를 통해 사람들 사이에

and you can actually also create concerts

새로운 연결고리를 만들 수도 있지만 반대로 사람들의 얼굴을 통해

by looking at the audience faces.

새로운 소리를 만들어낼 수도 있습니다.

So I connect the eye, and then I play the audience's faces.

제 전자 눈으로 사람들의 얼굴을 바라보면 하나의 콘서트가 탄생하는 것입니다.

The good thing about this is,

사람들의 얼굴로 콘서트를 만들 때

if the concert doesn't sound good, it's their fault.

좋은 점 중 하나는 좋은 소리가 나지 않아도 제 탓이 아니라

It's not my fault, because — (Laughter)

제가 보고 있는 사람들의 탓이라는 점입니다. (웃음)

And so another thing that happens is that

소리를 통해 색을 인식하면서

I started having this secondary effect

저는 어느 순간부터 색과 관련 없는 소리도

that normal sounds started to become color.

색으로 인식하기 시작했습니다.

I heard a telephone tone, and it felt green

한 번은 전화 울리는 소리를 들었는데 녹색을 느꼈습니다.

because it sounded just like the color green.

녹색이랑 소리가 똑같았기 때문입니다.

The BBC beeps, they sound turquoise,

BBC에서 나는 삐 소리는 청록색으로 느껴지고

and listening to Mozart became a yellow experience,

모차르트의 음악은 노란색 느낌이 납니다.

so I started to paint music and paint people's voices,

저는 이런 특성을 살려 음악과 사람들의 목소리를

because people's voices have frequencies

색으로 표현하기

that I relate to color.

시작했습니다.

And here's some music translated into color.

음악을 색으로 표현하면 어떻게 되는지 보여드리겠습니다.

For example, Mozart, "Queen of the Night," looks like this.

모차르트의 "밤의 여왕"은 이처럼 표현됩니다.

(Music) Very yellow and very colorful,

(음악 소리) 노란색이 많고 또

because there's many different frequencies.

주파수가 다양해서 매우 다채롭습니다.

(Music)

(음악 소리)

And this is a completely different song.

이건 전혀 다른 노래입니다.

(Music) It's Justin Bieber's "Baby." (Laughter)

(음악 소리) 저스틴 비버의 "베이비"입니다. (웃음)

(Music)

(음악 소리)

It is very pink and very yellow.

분홍색이랑 노란색이 많이 보이는군요.

So, also voices, I can transform speeches into color,

음악 말고 사람의 목소리나 연설도 색으로 표현할 수 있습니다.

for example, these are two very well-known speeches.

예를 들어 이것은 아주 유명한 연설 두 개를 색으로 표현한 것입니다.

One of them is Martin Luther King's "I Have A Dream,"

이 중 하나는 마틴 루터 킹 목사의 "나에게는 꿈이 있습니다"이고

and the other one is Hitler.

다른 하나는 히틀러의 연설입니다.

And I like to exhibit these paintings in the exhibition halls

전시회가 열릴 때 저는 이 사실을 숨긴 채 사람들에게

without labels, and then I ask people,

어느 쪽이 더 마음에 드는지

"Which one do you prefer?"

묻곤 합니다.

And most people change their preference

왼쪽이 히틀러의 연설이고

when I tell them that the one on the left is Hitler

오른쪽이 킹 목사의 연설이라고 하면 대부분의 사람들이

and the one on the right is Martin Luther King.

오른쪽이 더 좋다고 말을 바꾸더군요.

So I got to a point when I was able to perceive 360 colors,

전자 눈을 통해 색을 들으면서 저는 인간의 눈으로 감지할 수 있는 360가지 색을

just like human vision.

모두 구별할 수 있게 됐습니다.

I was able to differentiate all the degrees of the color wheel.

색상환 배열에 나오는 모든 색들을 구별할 수 있게 된 것입니다.

But then, I just thought that

하지만 저는 이에 멈추지 않고

this human vision wasn't good enough.

인간의 시각적 한계를 뛰어넘어 보기로 했습니다.

There's many, many more colors around us

저희 주변에는 인간의 눈으로는 볼 수 없지만

that we cannot perceive,

전자 눈으로는 감지할 수 있는

but that electronic eyes can perceive.

수많은 색들이 있습니다.

So I decided to continue extending my color senses,

그래서 저는 제 전자 눈에 적외선과 자외선 감지 기능을 더해

and I added infrared and I added ultraviolet

적외선과 자외선을 소리로 변환하도록 했습니다.

to the color-to-sound scale, so now I can hear colors

덕분에 저는 인간의 눈으로 볼 수 없는 색들을

that the human eye cannot perceive.

귀로 들을 수 있게 됐습니다.

For example, perceiving infrared is good because you can

예를 들어 적외선을 들음으로써 방 안에 동작 감지기가

actually detect if there's movement detectors in a room.

설치돼 있는지 쉽게 알 수 있고 또 누군가가 저를 향해

I can hear if someone points at me with a remote control.

리모콘을 누를 경우에도 바로 알아차릴 수 있습니다.

And the good thing about perceiving ultraviolet is that

자외선의 경우엔 밖의 날씨가

you can hear if it's a good day or a bad day to sunbathe,

일광욕을 하기에 좋은 날씨인지 아닌지 쉽게 확인할 수 있습니다.

because ultraviolet is a dangerous color,

자외선은 우리 목숨까지 위협할 수 있는

a color that can actually kill us, so I think we should all have this wish

위험한 색이기 때문에 인지 능력이 있느냐 없느냐의 차이는

to perceive things that we cannot perceive.

그만큼 더 커집니다.

That's why, two years ago,

이런 이유로 인해 저는 2년 전

I created the Cyborg Foundation,

사이보그 재단을 설립했습니다.

which is a foundation that tries to help people

사이보그 재단은 사람들이 사이보그가 될 수 있도록

become a cyborg, tries to encourage people

도와주고 있습니다. 사람들로 하여금

to extend their senses

자신의 몸에 특정 기술을 통합시켜

by using technology as part of the body.

감각의 영역을 확장하도록 하는 것입니다.

We should all think that knowledge comes from our senses,

우리의 지식은 우리의 감각에 근원을 두고 있으므로

so if we extend our senses,

감각의 영역이 확장된다면

we will consequently extend our knowledge.

우리의 지식도 저절로 확장될 것입니다.

I think life will be much more exciting

휴대폰 앱을 개발하는데 시간을 덜 보내고

when we stop creating applications for mobile phones

우리 몸을 개발하는데 시간을 더 투자하면

and we start creating applications for our own body.

우리 삶은 아마 훨씬 더 재미있어질 것입니다.

I think this will be a big, big change

저는 이런 방식의 변화가 21세기에

that we will see during this century.

큰 흐름으로 자리잡을 것이라고 생각합니다.

So I do encourage you all to think about which senses

그러므로 여러분 모두 어떤 감각들을 발전시키고 싶은지 한 번

you'd like to extend.

생각해보시길 바랍니다.

I would encourage you to become a cyborg.

그리고 사이보그가 되는 것을 두려워하지 마시길 바랍니다.

You won't be alone. Thank you. (Applause)

사이보그가 되더라도 여러분은 혼자가 아닐 것입니다. 감사합니다. (박수)

(Applause)

(박수)