Neil Harbisson: I listen to color

Translator: Joseph Geni Reviewer: Morton Bast

Vertaald door: Els De Keyser Nagekeken door: Christel Foncke

Well, I was born with a rare visual condition

Ik ben geboren met een zeldzame oogaandoening,

called achromatopsia, which is total color blindness,

achromatopsie, of volledige kleurenblindheid.

so I've never seen color,

Ik heb nooit kleur gezien.

and I don't know what color looks like,

Ik weet niet hoe kleur eruit ziet.

because I come from a grayscale world.

Ik kom uit een wereld van grijswaarden.

To me, the sky is always gray,

Voor mij is de lucht altijd grijs

flowers are always gray,

bloemen zijn altijd grijs,

and television is still in black and white.

en de tv is nog zwart-wit.

But, since the age of 21,

Maar sinds ik 21 ben,

instead of seeing color, I can hear color.

kan ik kleuren horen in plaats van zien.

In 2003, I started a project

In 2003 begon ik een project

with computer scientist Adam Montandon,

met computerwetenschapper Adam Montandon.

and the result, with further collaborations

We werken ook samen

with Peter Kese from Slovenia

met Peter Kese uit Slovenia

and Matias Lizana from Barcelona,

en Matias Lizana uit Barcelona.

is this electronic eye.

Het resultaat is dit elektronisch oog,

It's a color sensor that detects

een kleurensensor die detecteert

the color frequency in front of me — (Frequency sounds) —

wat de frequentie van de kleur is (Frequentiegeluid)

and sends this frequency to a chip installed

en deze doorstuurt naar een chip

at the back of my head, and I hear the color in front of me

achter op mijn hoofd. Zo hoor ik de kleur

through the bone, through bone conduction.

door botgeleiding.

(Frequency sounds) So, for example, if I have, like —

(Frequentiegeluid) Dit bijvoorbeeld.

This is the sound of purple. (Frequency sounds)

Purper klinkt zo. (Frequentiegeluid)

For example, this is the sound of grass. (Frequency sounds)

Dit is het geluid van gras. (Frequentiegeluid)

This is red, like TED. (Frequency sounds)

Dit is rood, zoals TED. (Frequentiegeluid)

This is the sound of a dirty sock. (Laughter)

Dit is het geluid van een vuile sok. (Gelach)

Which is like yellow, this one.

Dit klinkt als geel.

So I've been hearing color all the time for eight years,

Ik hoor nu al acht jaar kleur,

since 2004, so I find it completely normal now

sinds 2004. Ik vind het nu volledig normaal

to hear color all the time.

om de hele tijd kleur te horen.

At the start, though, I had to memorize the names you give

In het begin moest ik de namen memoriseren die jullie geven

for each color, so I had to memorize the notes,

aan elke kleur, op basis van de noten.

but after some time, all this information

Na een tijdje werd die informatie

became a perception.

een perceptie.

I didn't have to think about the notes.

Ik dacht niet meer na over de noten.

And after some time, this perception became a feeling.

Na een tijd werd die perceptie een gevoel.

I started to have favorite colors,

Ik kreeg favoriete kleuren

and I started to dream in colors.

en ik begon in kleuren te dromen.

So, when I started to dream in color is when I felt

Toen ik in kleuren begon te dromen, voelde ik

that the software and my brain had united,

dat de software en mijn brein één geworden waren.

because in my dreams, it was my brain creating

In mijn dromen was het mijn brein

electronic sounds. It wasn't the software,

dat de geluiden maakte, niet de software.

so that's when I started to feel like a cyborg.

Toen voelde ik me als een cyborg.

It's when I started to feel that the cybernetic device

Ik voelde dat het cybernetische toestel

was no longer a device.

geen toestel meer was.

It had become a part of my body,

Het was deel geworden van mijn lichaam,

an extension of my senses,

een extensie van mijn zintuigen.

and after some time, it even became a part

Na een tijdje werd het zelfs deel

of my official image.

van mijn officiële imago.

This is my passport from 2004.

Dit is mijn paspoort uit 2004.

You're not allowed to appear on U.K. passports

In het VK mag je niet op je paspoort staan

with electronic equipment, but I insisted

met een elektronisch tuig, maar ik drong aan

to the passport office that what they were seeing

en zei dat wat ze zagen,

was actually a new part of my body,

een nieuw lichaamsdeel was,

an extension of my brain, and they finally accepted me

een uitbreiding van mijn brein. Uiteindelijk mocht ik

to appear with the passport photo.

deze paspoortfoto gebruiken.

So, life has changed dramatically since I hear color,

Mijn leven is drastisch veranderd sinds ik kleur zie.

because color is almost everywhere,

Kleur is bijna overal.

so the biggest change for example is

De grootste verandering is

going to an art gallery, I can listen to a Picasso,

naar een kunstgalerij gaan. Ik kan naar een Picasso luisteren.

for example. So it's like I'm going to a concert hall,

Het is alsof ik naar een concertzaal ga.

because I can listen to the paintings.

Ik luister naar de schilderijen.

And supermarkets, I find this is very shocking,

Supermarkten vind ik schokkend.

it's very, very attractive to walk along a supermarket.

Ze zijn héél aantrekkelijk om erdoor te wandelen.

It's like going to a nightclub.

Net een nachtclub.

It's full of different melodies. (Laughter) Yeah.

Het zit vol verschillende melodietjes. (Gelach)

Especially the aisle with cleaning products.

Vooral de schoonmaakproducten.

It's just fabulous. (Laughter)

Gewoon geweldig. (Gelach)

Also, the way I dress has changed.

Ik kleed me nu anders.

Before, I used to dress in a way that it looked good.

Vroeger kleedde ik me zodat het er goed uitzag.

Now I dress in a way that it sounds good. (Laughter)

Nu kleed ik me zodat het goed klinkt.

(Applause)

(Applaus)

So today I'm dressed in C major,

Vandaag ben ik in do groot gekleed,

so it's quite a happy chord. (Laughter)

een vrolijk akkoord. (Gelach)

If I had to go to a funeral, though,

Als ik naar een begrafenis moet,

I would dress in B minor, which would be

kleed ik me in si klein,

turquoise, purple and orange. (Laughter)

turquoise, purper en oranje. (Gelach)

Also, food, the way I look at food has changed,

Mijn kijk op eten is veranderd.

because now I can display the food on a plate,

Ik kan nu het eten op een bord leggen

so I can eat my favorite song. (Laughter)

en mijn lievelingsliedje opeten. (Gelach)

So depending on how I display it,

Afhankelijk van hoe ik het schik,

I can hear and I can compose music with food.

hoor en componeer ik muziek met eten.

So imagine a restaurant where we can have, like,

Stel je een restaurant voor

Lady Gaga salads as starters. (Laughter) I mean,

dat Lady Gaga-salade als voorgerecht heeft. (Gelach)

this would get teenagers to eat their vegetables, probably.

Zo zouden tieners hun groenten wel opeten.

And also, some Rachmaninov piano concertos

Rachmaninovs pianoconcerto'€™s

as main dishes, and some Bjork or Madonna desserts,

als hoofdgerecht, en Björk en Madonna als dessert.

that would be a very exciting restaurant

Dat zou geweldig zijn: een restaurant

where you can actually eat songs.

waar je liedjes kon eten.

Also, the way I perceive beauty has changed,

De manier waarop ik schoonheid ervaar, is veranderd.

because when I look at someone, I hear their face,

Als ik iemand bekijk, hoor ik zijn gelaat.

so someone might look very beautiful but sound terrible.

Iemand kan er mooi uitzien maar vreselijk klinken.

(Laughter) And it might happen the opposite,

(Gelach) En ook het omgekeerde kan.

the other way around. So I really enjoy creating, like,

Ik hou ervan om

sound portraits of people.

geluidsportretten te maken.

Instead of drawing someone's face, like drawing the shape,

In plaats van de vorm van iemands gezicht te tekenen,

I point at them with the eye and I write down

wijs ik ze aan met het oog

the different notes I hear, and then I create sound portraits.

en maak van die noten een geluidsportret.

Here's some faces.

Dit zijn enkele gezichten.

(Musical chords)

(Muzikale akkoorden)

Yeah, Nicole Kidman sounds good. (Laughter)

Nicole Kidman klinkt goed. (Gelach)

Some people, I would never relate, but they sound similar.

Sommige mensen, schijnbaar zonder verband, klinken gelijkaardig.

Prince Charles has some similarities with Nicole Kidman.

Prins Charles lijkt in zekere zin op Nicole Kidman.

They have similar sound of eyes.

Hun ogen klinken hetzelfde.

So you relate people that you wouldn't relate,

Je associeert dus onverwachte mensen.

and you can actually also create concerts

Je creëert concerten

by looking at the audience faces.

door naar de gezichten van het publiek te kijken.

So I connect the eye, and then I play the audience's faces.

Ik schakel het oog in en speel de gezichten van het publiek af.

The good thing about this is,

Het goede is:

if the concert doesn't sound good, it's their fault.

als het concert niet goed klinkt, is het hun fout.

It's not my fault, because — (Laughter)

Het is niet mijn fout, want -- (Gelach)

And so another thing that happens is that

Ik ervaar ook nog een neveneffect.

I started having this secondary effect

Ik ervaar ook nog een neveneffect.

that normal sounds started to become color.

Gewone geluiden worden kleur.

I heard a telephone tone, and it felt green

Ik hoorde een telefoontoon die groen aanvoelde

because it sounded just like the color green.

omdat hij precies als de kleur groen klonk.

The BBC beeps, they sound turquoise,

De BBC-bieps klinken turquoise.

and listening to Mozart became a yellow experience,

Naar Mozart luisteren werd een gele ervaring.

so I started to paint music and paint people's voices,

Ik begon muziek te schilderen, en menselijke stemmen.

because people's voices have frequencies

Stemmen hebben frequenties

that I relate to color.

die ik met kleur associeer.

And here's some music translated into color.

Hier is muziek in kleur vertaald.

For example, Mozart, "Queen of the Night," looks like this.

De 'Koningin van de nacht' van Mozart ziet er zo uit.

(Music) Very yellow and very colorful,

(Muziek) Heel geel, heel kleurrijk,

because there's many different frequencies.

omdat er veel verschillende frequenties inzitten.

(Music)

(Muziek)

And this is a completely different song.

Dit is een heel ander liedje.

(Music) It's Justin Bieber's "Baby." (Laughter)

(Muziek) Justin Biebers 'Baby'€™. (Gelach)

(Music)

(Muziek)

It is very pink and very yellow.

Heel roze en heel geel.

So, also voices, I can transform speeches into color,

Ik kan ook toespraken in kleur omzetten.

for example, these are two very well-known speeches.

Dit zijn twee erg bekende toespraken.

One of them is Martin Luther King's "I Have A Dream,"

Eén ervan is Martin Luther Kings 'I have a dream',

and the other one is Hitler.

de andere is Hitler.

And I like to exhibit these paintings in the exhibition halls

Ik stel ze graag tentoon

without labels, and then I ask people,

zonder bijschrift. Dan vraag ik mensen:

"Which one do you prefer?"

€"Welke verkies je?€"

And most people change their preference

De meeste mensen veranderen van mening

when I tell them that the one on the left is Hitler

als ik vertel dat de linkse Hitler is

and the one on the right is Martin Luther King.

en de rechtse Martin Luther King.

So I got to a point when I was able to perceive 360 colors,

Op de duur was ik in staat om 360 kleuren te ervaren,

just like human vision.

zoals de menselijke visie.

I was able to differentiate all the degrees of the color wheel.

Ik kon alle graden van het kleurenwiel onderscheiden.

But then, I just thought that

Toen bedacht ik

this human vision wasn't good enough.

dat menselijke visie niet genoeg is.

There's many, many more colors around us

Er zijn nog veel meer kleuren

that we cannot perceive,

die wij niet kunnen ervaren,

but that electronic eyes can perceive.

maar een elektronisch oog wel.

So I decided to continue extending my color senses,

Ik besloot mijn kleurzintuigen verder uit te breiden.

and I added infrared and I added ultraviolet

Ik voegde infrarood en ultraviolet toe

to the color-to-sound scale, so now I can hear colors

aan de kleur-naar-geluidsschaal. Nu hoor ik kleuren

that the human eye cannot perceive.

die het menselijk oog niet waarneemt.

For example, perceiving infrared is good because you can

Infrarood waarnemen is goed

actually detect if there's movement detectors in a room.

omdat je merkt dat er bewegingssensoren in een ruimte zijn.

I can hear if someone points at me with a remote control.

Ik hoor het als iemand me aanwijst met een afstandsbediening.

And the good thing about perceiving ultraviolet is that

Ultraviolet horen is goed

you can hear if it's a good day or a bad day to sunbathe,

want je hoort of het een goede dag is om te zonnebaden.

because ultraviolet is a dangerous color,

Ultraviolet is een gevaarlijke kleur.

a color that can actually kill us, so I think we should all have this wish

Ze kan ons doden. We zouden allemaal moeten wensen

to perceive things that we cannot perceive.

om dingen waar te nemen die nu niet kunnen.

That's why, two years ago,

Daarom richtte ik 2 jaar geleden

I created the Cyborg Foundation,

de Cyborgstichting op.

which is a foundation that tries to help people

Ze probeert mensen te helpen

become a cyborg, tries to encourage people

om een cyborg te worden, ze aan te sporen

to extend their senses

om hun zintuigen uit te breiden

by using technology as part of the body.

door technologie als deel van het lichaam te gebruiken.

We should all think that knowledge comes from our senses,

Kennis komt uit onze zintuigen.

so if we extend our senses,

Als we onze zintuigen uitbreiden,

we will consequently extend our knowledge.

zullen we ook onze kennis uitbreiden.

I think life will be much more exciting

Het leven zal spannender worden

when we stop creating applications for mobile phones

als we geen toepassingen meer maken voor onze mobieltjes,

and we start creating applications for our own body.

maar voor ons eigen lichaam.

I think this will be a big, big change

Dit wordt een grote, grote verandering

that we will see during this century.

tijdens deze eeuw.

So I do encourage you all to think about which senses

Ik moedig jullie allen aan om te overwegen welke zintuigen

you'd like to extend.

je wil uitbreiden.

I would encourage you to become a cyborg.

Ik moedig je aan om een cyborg te worden.

You won't be alone. Thank you. (Applause)

Je zal niet alleen zijn. Dankuwel. (Applaus)

(Applause)

(Applaus)