Tod Machover & Dan Ellsey: Releasing the music in your head

Vertaald door: Els De Keyser Nagekeken door: Christel Foncke

The first idea I'd like to suggest is that we all

Mijn eerste suggestie is dat we allemaal

love music a great deal. It means a lot to us.

veel van muziek houden. Het betekent veel voor ons.

But music is even more powerful if you don't just listen to it, but you make it yourself.

Maar muziek is nog krachtiger als je ze niet alleen beluistert, maar ook zelf maakt.

So, that's my first idea. And we all know about the Mozart effect --

Dat is mijn eerste idee. We kennen allemaal het Mozart-effect --

the idea that's been around for the last five to 10 years --

een idee die de jongste 5 à 10 jaar opgeld maakt --

that just by listening to music or by playing music to your baby [in utero],

dat als je gewoon naar muziek luistert, of als je muziek speelt voor je baby in de baarmoeder,

that it'll raise our IQ points 10, 20, 30 percent.

je IQ met 10, 20, 30 punten stijgt.

Great idea, but it doesn't work at all.

Fantastisch idee, maar het werkt helemaal niet.

So, you can't just listen to music, you have to make it somehow.

Het volstaat niet om naar muziek te luisteren, je moet ze maken.

And I'd add to that, that it's not just making it,

Ik voeg eraan toe dat het niet gewoon maken is.

but everybody, each of us, everybody in the world

Iedereen, elk van ons, iedereen op de wereld

has the power to create and be part of music in a very dynamic way,

heeft het in zich om op een heel dynamische manier muziek te creëren en erin te delen.

and that's one of the main parts of my work.

Dat is één van de hoofdonderdelen van mijn werk.

So, with the MIT Media Lab, for quite a while now,

In het MIT Media Lab zijn we nu al een tijdje bezig

we've been engaged in a field called active music.

in een domein dat actieve muziek heet.

What are all the possible ways that we can think of

Wat zijn de manieren die we kunnen bedenken

to get everybody in the middle of a musical experience,

om iedereen bij een muzikale ervaring te betrekken,

not just listening, but making music?

en ze niet alleen laten luisteren, maar muziek laten maken?

And we started by making instruments for some of the world's greatest performers --

We begonnen met instrumenten te maken voor een aantal topvertolkers --

we call these hyperinstruments -- for Yo-Yo Ma, Peter Gabriel, Prince,

die noemen we "hyperinstrumenten" -- voor Yo-Yo Ma, Peter Gabriel, Prince,

orchestras, rock bands. Instruments where they're all kinds of sensors

orkesten, rockgroepen, instrumenten met allerlei sensoren

built right into the instrument, so the instrument knows how it's being played.

in het instrument ingebouwd, zodat het instrument weet hoe het wordt bespeeld.

And just by changing the interpretation and the feeling,

Door enkel de interpretatie en het gevoel aan te passen,

I can turn my cello into a voice, or into a whole orchestra,

kan ik van mijn cello een stem maken, of een heel orkest,

or into something that nobody has ever heard before.

of iets dat niemand ooit gehoord heeft.

When we started making these, I started thinking, why can't we make

Toen we die begonnen te maken, dacht ik: waarom kunnen we geen

wonderful instruments like that for everybody,

heerlijke instrumenten als deze maken voor iedereen,

people who aren't fantastic Yo-Yo Mas or Princes?

voor mensen die geen geweldige Yo-Yo Ma's of Princen zijn?

So, we've made a whole series of instruments.

Dus maakten we een hele reeks instrumenten.

One of the largest collections is called the Brain Opera.

Eén van de grootste verzamelingen heet de Breinopera.

It's a whole orchestra of about 100 instruments,

Het is een compleet orkest van ongeveer 100 instrumenten,

all designed for anybody to play using natural skill.

allemaal ontworpen om te worden bespeeld op basis van natuurlijk talent.

So, you can play a video game, drive through a piece of music,

Dus kan je een videospel spelen, door een stuk muziek rijden,

use your body gesture to control huge masses of sound,

lichaamsbewegingen gebruiken om grote geluidsmassa's aan te sturen,

touch a special surface to make melodies, use your voice to make a whole aura.

een speciale oppervlakte gebruiken om melodieën te maken, je stem gebruiken om een aura te produceren.

And when we make the Brain Opera, we invite the public to come in,

Als we de Breinopera uitvoeren, nodigen we het publiek uit

to try these instruments and then collaborate with us

om deze instrumenten te proberen en samen met ons

to help make each performance of the Brain Opera.

elke uitvoering van de Breinopera vorm te geven.

We toured that for a long time. It is now permanently in Vienna,

We zijn er lang mee op tournee geweest. Het staat nu permanent in Wenen,

where we built a museum around it.

waar we er een museum rond gebouwd hebben.

And that led to something which you probably do know.

Dat leidde tot iets dat je wellicht kent.

Guitar Hero came out of our lab,

Guitar Hero was een product van ons laboratorium.

and my two teenage daughters and most of the students at the MIT Media Lab

Mijn twee tienerdochters en de meeste studenten van MIT Media Lab

are proof that if you make the right kind of interface,

zijn het bewijs dat mensen, als je de juiste interface maakt,

people are really interested in being in the middle of a piece of music,

echt in een stuk muziek willen opgaan,

and playing it over and over and over again.

en het altijd opnieuw willen spelen.

So, the model works, but it's only the tip of the iceberg,

Het model werkt dus, maar het is maar de top van de ijsberg.

because my second idea is that it's not enough just to want

Mijn tweede idee is dat het niet volstaat

to make music in something like Guitar Hero.

om muziek te willen maken in iets als Guitar Hero.

And music is very fun, but it's also transformative.

Muziek is echt leuk, maar het maakt je ook tot een ander mens.

It's very, very important.

Het is heel erg belangrijk.

Music can change your life, more than almost anything.

Meer dan wat ook kan muziek je leven veranderen.

It can change the way you communicate with others,

Het kan je manier van communiceren met anderen veranderen.

it can change your body, it can change your mind. So, we're trying

Het kan je lichaam veranderen, en je geest. We proberen dus

to go to the next step of how you build on top of something like Guitar Hero.

een volgende stap te zetten, voortbouwend op iets als Guitar Hero.

We are very involved in education. We have a long-term project

We zijn erg begaan met onderwijs. We hebben een langetermijnproject,

called Toy Symphony, where we make all kinds of instruments that are also addictive,

Toy Symphony, waarin we allerlei instrumenten maken die verslavend zijn,

but for little kids, so the kids will fall in love with making music,

voor kleine kinderen, zodat de kinderen dol worden op muziek maken,

want to spend their time doing it, and then will demand to know how it works,

er hun tijd aan willen besteden en gaan vragen hoe het werkt,

how to make more, how to create. So, we make squeezy instruments,

hoe je er nog meer maakt, hoe je ze schept. We maken allerlei knijpinstrumenten,

like these Music Shapers that measure the electricity in your fingers,

zoals deze Music Shapers, die de elektriciteit in je vingers meten,

Beatbugs that let you tap in rhythms -- they gather your rhythm,

Beat Bugs die je ritmes laten kloppen -- ze vangen je ritme op,

and like hot potato, you send your rhythm to your friends,

en jij stuurt het, als een hete aardappel, naar je vrienden door,

who then have to imitate or respond to what your doing --

die je moeten imiteren of moeten reageren op wat je doet --

and a software package called Hyperscore, which lets anybody use lines and color

en een softwarepakket genaamd Hyperscore, waarmee iedereen lijnen en kleuren

to make quite sophisticated music. Extremely easy to use, but once you use it,

kan gebruiken om gesofisticeerde muziek te maken. Extreem gebruiksvriendelijk, en eens je het gebruikt,

you can go quite deep -- music in any style. And then, by pressing a button,

kan je erg ver mee gaan -- muziek in elke stijl. Met een druk op de knop

it turns into music notation so that live musicians can play your pieces.

wordt het bladmuziek zodat muzikanten je stukken live kunnen spelen.

We've had good enough, really, very powerful effects with kids

We hebben goede, echt krachtige resultaten gehad met kinderen

around the world, and now people of all ages, using Hyperscore.

over de hele wereld. Mensen van alle leeftijden gebruiken nu Hyperscore.

So, we've gotten more and more interested in using these kinds of creative activities

We kregen dus steeds meer belangstelling in het gebruik van deze creatieve activiteiten

in a much broader context, for all kinds of people

in een veel bredere context, voor allerlei soorten mensen

who don't usually have the opportunity to make music.

die meestal niet de kans krijgen om muziek te maken.

So, one of the growing fields that we're working on

Eén van de groeidomeinen waarin we vandaag werken

at the Media Lab right now is music, mind and health.

in het Media Lab is muziek, geest en gezondheid.

A lot of you have probably seen Oliver Sacks' wonderful new book called

Waarschijnlijk hebben jullie het geweldige nieuwe boek van Oliver Sacks gezien,

"Musicophilia". It's on sale in the bookstore. It's a great book.

"Musicofilia". Het is te koop in de boekhandel. Het is een fantastisch boek.

If you haven't seen it, it's worth reading. He's a pianist himself,

Als je het niet kent, het is de moeite waard. Hij is zelf pianist

and he details his whole career of looking at and observing

en hij schrijft in detail over zijn carrière, waarin hij de ongelooflijk krachtige effecten observeerde

incredibly powerful effects that music has had on peoples' lives in unusual situations.

die muziek heeft op het leven van mensen in ongewone omstandigheden.

So we know, for instance, that music is almost always the last thing

We weten bijvoorbeeld dat muziek bijna steeds het laatste is

that people with advanced Alzheimer's can still respond to.

waarop mensen met vergevorderde Alzheimer nog steeds reageren.

Maybe many of you have noticed this with loved ones,

Velen van jullie hebben dit misschien gemerkt bij hun geliefden:

you can find somebody who can't recognize their face in the mirror,

er zijn mensen die hun gezicht niet herkennen in de spiegel

or can't tell anyone in their family, but you can still find a shard of music

en niemand van hun familie herkennen, maar je vindt wel nog steeds een stuk muziek

that that person will jump out of the chair and start singing. And with that

dat die persoon uit zijn stoel doet opspringen en doet zingen.

you can bring back parts of people's memories and personalities.

Daarmee kan je delen van de herinneringen en de persoonlijkheid van mensen terugbrengen.

Music is the best way to restore speech to people who have lost it through strokes,

Muziek is de beste manier om het spraakvermogen te herstellen van mensen die het door een beroerte zijn kwijtgeraakt,

movement to people with Parkinson's disease.

of het motorisch vermogen van Parkinsonpatiënten.

It's very powerful for depression, schizophrenia, many, many things.

Het is erg krachtig voor depressie, schizofrenie, heel erg veel dingen.

So, we're working on understanding those underlying principles

Wij werken er dus aan om die onderliggende principes te begrijpen,

and then building activities which will let music really improve people's health.

en dan activiteiten op te bouwen waardoor muziek de gezondheid van de mensen echt verbetert.

And we do this in many ways. We work with many different hospitals.

We doen dit op vele manieren. We werken met vele verschillende ziekenhuizen.

One of them is right near Boston, called Tewksbury Hospital.

Eén ervan ligt naast Boston, het Tewksbury Hospital.

It's a long-term state hospital, where several years ago

Het is een rusthuis van de overheid waar we jaren geleden

we started working with Hyperscore and patients with physical and mental disabilities.

begonnen te werken met Hyperscore, voor fysiek en mentaal beperkte patiënten.

This has become a central part of the treatment at Tewksbury hospital,

Dit is een centraal onderdeel geworden van de behandeling in het Tewksbury Hospital.

so everybody there clamors to work on musical activities.

Iedereen roept daar om te kunnen werken met muzikale activiteiten.

It's the activity that seems to accelerate people's treatment the most

Het lijkt de activiteit met de meeste impact op de snelheid van de behandeling.

and it also brings the entire hospital together as a kind of musical community.

Ze brengt ook het hele ziekenhuis samen, als een soort muzikale gemeenschap.

I wanted to show you a quick video of some of this work before I go on.

Ik wilde jullie een klein filmpje tonen van dit werk vooraleer ik verder ga.

Video: They're manipulating each other's rhythms.

Video: Ze manipuleren elkaars ritmes.

It's a real experience, not only to learn how to play and listen to rhythms,

Het is een echte ervaring: je leert niet alleen spelen en naar ritmes luisteren,

but to train your musical memory and playing music in a group.

maar je traint ook je muzikale geheugen en je speelt muziek in groep.

To get their hands on music, to shape it themselves, change it,

Je manipuleert muziek om ze zelf vorm te geven, te veranderen,

to experiment with it, to make their own music.

ermee te experimenteren, je eigen muziek te maken.

So Hyperscore lets you start from scratch very quickly.

Met Hyperscore kan je snel van nul beginnen.

Everybody can experience music in a profound way,

Iedereen kan muziek ervaren op een heel diep niveau,

we just have to make different tools.

we moeten gewoon verschillende hulpmiddelen maken.

The third idea I want to share with you is that music, paradoxically,

Het derde idee dat ik met jullie wil delen, is dat muziek, paradoxaal genoeg,

I think even more than words, is one of the very best ways we have

nog meer dan woorden, één van de beste manieren is die we hebben

of showing who we really are. I love giving talks, although

om te tonen wie we echt zijn. Ik hou ervan om voor publiek te spreken,

strangely I feel more nervous giving talks than playing music.

hoewel ik vreemd genoeg nerveuzer ben bij het spreken dan bij het musiceren.

If I were here playing cello, or playing on a synth, or sharing my music with you,

Als ik hier cello zou spelen, of synthesizer, of mijn muziek met jullie zou delen,

I'd be able to show things about myself that I can't tell you in words,

dan zou ik dingen over mezelf kunnen tonen die ik niet in woorden kan vertellen,

more personal things, perhaps deeper things.

persoonlijker dingen, misschien diepere dingen.

I think that's true for many of us, and I want to give you two examples

Ik denk dat dat voor velen van ons geldt. Ik geef jullie graag twee voorbeelden

of how music is one of the most powerful interfaces we have,

van hoe muziek een van de krachtigste interfaces is die we hebben

from ourselves to the outside world.

tussen onszelf en de buitenwereld.

The first is a really crazy project that we're building right now, called

Het eerste is een echt maf project dat we aan het opzetten zijn.

Death and the Powers. And it's a big opera,

Het heet Dood en de Machten. Het is een grote opera,

one of the larger opera projects going on in the world right now.

een van de grotere operaprojecten die vandaag op de wereld plaatshebben.

And it's about a man, rich, successful, powerful, who wants to live forever.

Het gaat over een man, rijk, succesvol, machtig, die het eeuwige leven wil.

So, he figures out a way to download himself into his environment,

Hij ontdekt hoe hij zichzelf in zijn omgeving kan downloaden,

actually into a series of books.

in een reeks boeken.

So this guy wants to live forever, he downloads himself into his environment.

Deze kerel wil eeuwig leven. Hij downloadt zichzelf in zijn omgeving.

The main singer disappears at the beginning of the opera

De vertolker van de hoofdrol verdwijnt bij het begin van de opera

and the entire stage becomes the main character. It becomes his legacy.

en het hele podium wordt het hoofdpersonage. Het wordt zijn nalatenschap.

And the opera is about what we can share, what we can pass on to others,

De opera gaat over wat we kunnen delen, wat we kunnen doorgeven aan anderen,

to the people we love, and what we can't.

aan de mensen van wie we houden, en wat we niet kunnen doorgeven.

Every object in the opera comes alive and is a gigantic music instrument,

Elk voorwerp in de opera komt tot leven en is een gigantisch muziekinstrument,

like this chandelier. It takes up the whole stage. It looks like a chandelier,

zoals deze kandelaar. Die neemt het hele podium in. Het lijkt op een kandelaar,

but it's actually a robotic music instrument.

maar eigenlijk is het een muziekrobot.

So, as you can see in this prototype, gigantic piano strings,

Zoals je in dit prototype ziet: reusachtige pianosnaren,

each string is controlled with a little robotic element --

elke snaar bestuurd met een klein robot-element --

either little bows that stroke the strings, propellers that tickle the strings,

ofwel kleine bogen die over de snaren strijken, propellers die op de snaren tokkelen,

acoustic signals that vibrate the strings. We also have an army of robots on stage.

akoestische signalen die de snaren doen trillen. We hebben ook een leger van robots op het podium.

These robots are the kind of the intermediary between the main character, Simon Powers,

Deze robotten zijn een soort tussenpersonen tussen de hoofdpersoon, Simon Powers,

and his family. There are a whole series of them, kind of like a Greek chorus.

en zijn familie. Ze zijn met een hele reeks, als een soort Grieks koor.

They observe the action. We've designed these square robots that we're testing right now

Ze observeren de actie. We hebben vierkante robots ontworpen die we aan het testen zijn

at MIT called OperaBots. These OperaBots follow my music.

op MIT. Deze OperaBots volgen mijn muziek.

They follow the characters. They're smart enough, we hope,

Ze volgen de personages. We hopen dat ze slim genoeg zijn

not to bump into each other. They go off on their own.

om niet tegen elkaar te botsen. Ze gaan zelfstandig op stap.

And then they can also, when you snap, line up exactly the way you'd like to.

En als je met je vingers knipt, kunnen ze ook precies op de lijn gaan staan die jij wil.

Even though they're cubes, they actually have a lot of personality.

Hoewel het kubussen zijn, hebben ze veel persoonlijkheid.

The largest set piece in the opera is called The System. It's a series of books.

Het grootste decorstuk in de opera heet "Het Systeem". Het is een reeks boeken.

Every single book is robotic, so they all move, they all make sound,

Elk boek is een robot. Ze bewegen allemaal, ze maken geluid,

and when you put them all together, they turn into these walls,

en als je ze verzamelt, vormen ze zich om tot muren

which have the gesture and the personality of Simon Powers. So he's disappeared,

die de gebaren en persoonlijkheid van Simon Powers hebben. Hij is verdwenen,

but the whole physical environment becomes this person.

maar de hele fysieke omgeving wordt zijn personage.

This is how he's chosen to represent himself.

Hij heeft ervoor gekozen zich zo voor te stellen.

The books also have high-packed LEDs on the spines. So it's all display.

De boeken zijn ook volgestouwd me LEDs op hun ruggen. Het is dus één scherm.

And here's the great baritone James Maddalena as he enters The System.

Dit is de grote bariton James Maddalena, bij zijn entree in het systeem.

This is a sneak preview.

Dit is een voorsmaakje.

This premieres in Monaco -- it's in September 2009. If by any chance you can't make it,

De première hiervan is in Monaco, in september 2009. Als je daar niet bij kunt zijn,

another idea with this project -- here's this guy building his legacy

dan is hier nog een idee met dit project. Deze kerel bouwt zijn nalatenschap op

through this very unusual form, through music and through the environment.

in deze zeer ongebruikelijke vorm, met muziek en met de omgeving.

But we're also making this available both online and in public spaces,

We publiceren dit ook online en op openbare plekken,

as a way of each of us to use music and images from our lives

als een manier waarop elk van ons muziek en beelden over zijn leven kan gebruiken

to make our own legacy or to make a legacy of someone we love.

om zijn eigen nalatenschap of een nalatenschap van een geliefde te creëren.

So instead of being grand opera, this opera will turn into what we're

Eerder dan een Grote Opera zal deze opera een

thinking of as personal opera.

persoonlijke opera worden.

And, if you're going to make a personal opera, what about a personal instrument?

Als je een persoonlijke opera maakt, dan ook een persoonlijk instrument?

Everything I've shown you so far -- whether it's a hyper-cello for Yo-Yo Ma

Al wat ik je tot hiertoe heb getoond -- de hypercello voor Yo-Yo Ma,

or squeezy toy for a child -- the instruments stayed the same and are valuable

of de knijpinstrumenten voor een kind -- de instrumenten bleven gelijk en hadden waarde

for a certain class of person: a virtuoso, a child.

voor een bepaald soort persoon, of een virtuoos, of een kind.

But what if I could make an instrument that could be adapted

Wat als ik een instrument kon maken dat ik kon aanpassen

to the way I personally behave, to the way my hands work,

aan de manier waarop ik mezelf gedraag, hoe mijn handen werken,

to what I do very skillfully, perhaps, to what I don't do so skillfully?

wat ik technisch heel vlot doe, of misschien net niet?

I think that this is the future of interface, it's the future of music, the future of instruments.

Volgens mij is dat de toekomst van de interface, van de muziek, van instrumenten.

And I'd like now to invite two very special people on the stage,

Ik zou graag twee erg bijzondere mensen op het podium roepen,

so that I can give you an example of what personal instruments might be like.

zodat ik jullie een voorbeeld kan even van hoe persoonlijke instrumenten er zouden kunnen uitzien.

So, can you give a hand to Adam Boulanger, Ph.D. student from

Graag applaus voor Adam Boulanger, doctoraatsstudent aan

the MIT Media Lab, and Dan Ellsey. Dan,

het MIT Media Lab, en Dan Ellsey.

thanks to TED and to Bombardier Flexjet, Dan is here with us today

Dankzij TED en Bombardier Flexjet is Dan hier vandaag bij ons,

all the way from Tewksbury. He's a resident at Tewksbury Hospital.

helemaal uit het verre Tewksbury. Hij verblijft in het Tewksbury Hospital.

This is by far the farthest he's strayed from Tewksbury Hospital, I can tell you that,

Dit is verreweg het verste dat hij vanuit Tewksbury Hospital vandaan geweest is, dat zeg ik je.

because he's motivated to meet with you today and show you his own music.

Hij wil jullie graag ontmoeten en jullie zijn eigen muziek tonen.

So, first of all, Dan, do you want to say hi to everyone and tell everyone who you are?

Om te beginnen, Dan, wil je iedereen begroeten en zeggen wie je bent?

Dan Ellsey: Hello. My name is Dan Ellsey. I am 34 years old and I have cerebral palsy.

Dan Ellsey: Hallo. Mijn naam is Dan Ellsey. Ik ben 34 jaar oud en ik heb een hersenverlamming.

I have always loved music and I am excited to be able to conduct

Ik heb altijd van muziek gehouden en vind het erg spannend dat ik mijn eigen muziek

my own music with this new software.

kan dirigeren met deze nieuwe software.

Tod Machover: And we're really excited to have you here, really Dan. (Applause)

Tod Machover: En wij vinden het heel spannend dat je hier bent, echt, Dan. (Applaus)

So we met Dan about three years ago, three and a half years ago,

We ontmoetten Dan ongeveer 3 à 3,5 jaar geleden,

when we started working at Tewksbury. Everybody we met there was fantastic,

toen we op Tewksbury begonnen te werken. Iedereen die we daar ontmoetten was geweldig,

did fantastic music. Dan had never made music before, and it turned out

en maakte geweldige muziek. Dan had nooit eerder muziek gemaakt, en het bleek

he was really fantastic at it. He's a born composer.

dat hij er een kei in was. Hij is een geboren componist.

He's very shy, too.

Hij is ook erg verlegen.

So, turned out he's a fantastic composer, and over the last few years has been

Het bleek dus dat hij een geweldige componist is. De jongste jaren heeft hij

a constant collaborator of ours. He has made many, many pieces.

constant met ons samengewerkt. Hij heeft vele, vele stukken gemaakt.

He makes his own CDs. Actually, he is quite well known in the Boston area --

Hij maakt zijn eigen cd's. Hij is eigenlijk een beroemdheid in de streek van Boston,

mentors people at the hospital and children, locally, in how to make their own music.

is mentor van mensen in het ziekenhuis en van kinderen uit de buurt bij het maken van hun eigen muziek.

And I'll let Adam tell you. So, Adam is a Ph.D. student at MIT, an expert in music

Ik laat Adam aan het woord. Adam is doctoraatsstudent aan het MIT, een expert in muziek,

technology and medicine. And Adam and Dan have become close collaborators.

technologie en geneeskunde. Adam en Dan zijn nauw gaan samenwerken.

What Adam's been working on for this last period is not only how to have Dan

Adam heeft de jongste tijd gewerkt rond de manier waarop Dan

be able easily to make his own pieces,

het gemakkelijkst zijn eigen stukken kan maken,

but how he can perform his piece using this kind of personal instrument.

en daarnaast ook hoe hij zijn stuk kan uitvoeren met een persoonlijk instrument.

So, you want to say a little bit about how you guys work?

Wil je wat vertellen over hoe jullie samenwerken?

Adam Boulanger: Yes. So, Tod and I entered into a discussion

Adam Boulanger: Ja. Tod en ik hadden een discussie

following the Tewksbury work and it was really about how Dan is an expressive

over het werk in Tewksbury. Die draaide om het feit dat Dan een expressieve,

person, and he's an intelligent and creative person. And it's in his face,

intelligente en creatieve persoonlijkheid is. Dat zie je aan zijn gezicht,

it's in his breathing, it's in his eyes. How come he can't perform

zijn ademhaling, zijn ogen. Hoe komt het dat hij geen van zijn

one of his pieces of music? That's our responsibility, and it doesn't make sense.

muziekstukken kan uitvoeren? Dat is onze verantwoordelijkheid, en het klopt niet.

So we started developing a technology that will allow him with nuance,

Dus begonnen we met het ontwerp van een technologie waardoor hij genuanceerd,

with precision, with control, and despite his physical disability, to be able to do that,

precies, gecontroleerd en niet gehinderd door zijn fysieke handicap

to be able to perform his piece of music.

in staat is om zijn muziekstuk uit te voeren.

So, the process and the technology --

Wat het proces en de technologie betreft:

basically, first we needed an engineering solution. So, you know,

eerst hadden we een oplossing nodig voor het ingenieursvraagstuk.

we have a FireWire camera, it looked at an infrared pointer.

We hebben een FireWire-camera die naar een infrarood-aanwijzer kijkt.

We went with the type of gesture metaphor that Dan was already used to

We gebruikten het soort gebarenmetafoor dat hij al gewend is te gebruiken

with his speaking controller.

met zijn spraakcontrole.

And this was actually the least interesting part of the work, you know,

Dat was eigenlijk het minst interessante deel van het werk,

the design process. We needed an input; we needed continuous tracking;

het ontwerpen. We hadden input nodig, continue opvolging.

in the software, we look at the types of shapes he's making.

In de software bekeken we de soorten vormen die hij maakt.

But, then was the really interesting aspect of the work, following the engineering part,

Maar het echt interessante deel van het werk, na het ingenieursgedeelte,

where, basically, we're coding over Dan's shoulder at the hospital

was toen we over Dan's schouder code schreven in het ziekenhuis,

extensively to figure out, you know, how does Dan move?

om uitgebreid te achterhalen hoe Dan beweegt.

What's useful to him as an expressive motion?

Wat is zinvol voor hem, als expressieve beweging?

You know, what's his metaphor for performance?

Wat is zijn metafoor voor uitvoering?

What types of things does he find

Wat voor dingen vindt hij belangrijk om

important to control and convey in a piece of music?

te controleren en over te brengen in een muziekstuk?

So all the parameter fitting, and really the technology

Het afstellen van de parameters en van de technologie,

was stretched at that point to fit just Dan.

dat werd allemaal aangepast om precies bij Dan te passen.

And, you know, I think this is a perspective shift. It's not that our technologies --

Weet je, dit is een verandering van perspectief. Niet dat onze technologie --

they provide access, they allow us to create pieces of creative work.

die geeft ons wel toegang en laat ons creatief werk produceren.

But what about expression? What about that moment when an artist delivers

Maar wat met de expressie? Wat met het moment waarop een kunstenaar

that piece of work? You know, do our technologies allow us to express?

het stuk aflevert? Laat onze technologie ons toe om onszelf uit te drukken?

Do they provide structure for us to do that? And, you know, that's a personal relationship

Geeft ze ons daar de structuur voor? Dat is een persoonlijke relatie

to expression that is lacking in the technological sphere. So, you know,

met expressie die ontbreekt in technologische kringen.

with Dan, we needed a new design process, a new engineering process

Met dan hadden we nood aan een nieuw designproces, een nieuw engineering-proces,

to sort of discover his movement and his path to expression that allow him to perform.

om zijn beweging te ontdekken en zijn pad naar expressie die hem toelaat om iets uit te voeren.

And so that's what we'll do today.

Dat zullen we vandaag doen.

TM: So let's do it. So Dan do you want to tell everyone

TM: Daar gaan we. Dan, wil je iedereen vertellen

about what you're going to play now?

wat je nu gaat spelen?

DE: This is "My Eagle Song."

DE: Dit is "Mijn arendslied".

TM: So Dan is going to play a piece of his, called "My Eagle Song".

TM: Dan gaat zijn stuk spelen, dat "Mijn arendslied" heet.

In fact, this is the score for Dan's piece,

Dit is de partituur van het stuk van Dan,

completely composed by Dan in Hyperscore.

helemaal gecomponeerd door Dan, in Hyperscore.

So he can use his infrared tracker to go directly into Hyperscore.

Hij kan zijn infraroodtracker gebruiken om rechtstreeks naar Hyperscore te gaan.

He's incredibly fast at it, too, faster than I am, in fact.

Hij is er ook zeer snel in, sneller dan ik, eigenlijk.

(Laughter)

(Gelach)

TM: He's really modest, too.

TM: Hij is ook erg bescheiden.

So he can go in Hyperscore. You start out by making melodies and rhythms.

Hij kan dus naar Hyperscore gaan. Je begint met het maken van melodieën en ritmes.

He can place those exactly where he wants.

Hij kan ze plaatsen exact waar hij ze wil hebben.

Each one gets a color. He goes back into the composition window,

Ze krijgen allemaal een kleur, gaat terug naar het compositiescherm,

draws the lines, places everything the way he wants to. Looking at the Hyperscore,

trekt de lijnen, plaatst alles waar hij wil. Als je de Hyperscore bekijkt,

you can see it also, you can see where the sections are,

zie je het ook: je ziet waar de onderverdelingen zijn,

something might continue for a while, change, get really crazy and then end

iets kan even duren, veranderen, helemaal uit de bol gaan en dan

up with a big bang at the end.

afsluiten met een grote knal op het einde.

So that's the way he made his piece, and as Adam says,

Zo heeft hij zijn stuk gemaakt. Zoals Adam zei,

we then figured out the best way to have him perform his piece.

visten we toen uit wat de beste manier was voor hem om zijn stuk te vertolken.

It's going to be looked at by this camera, analyze his movements,

Het wordt bekeken door zijn camera, we analyseren zijn bewegingen,

it's going to let Dan bring out all the different aspects of his music that he wants to.

en laten Dan alle verschillende aspecten van zijn muziek uitdrukken, zoals hij het wil.

And you're also going to notice a visual on the screen.

Je hebt ook een visueel beeld op het scherm.

We asked one of our students to look at what the camera is measuring.

We vroegen één van onze studenten te bekijken wat de camera meet.

But instead of making it very literal, showing you exactly

Maar in plaats van dat erg letterlijk te doen en exact te tonen

the camera tracing, we turned it into a graphic that shows you the basic

wat de camera volgt, maakten we er een grafiek van die je

movement, and shows the way it's being analyzed.

de basisbeweging toont, en de manier waarop ze wordt geanalyseerd.

I think it gives an understanding of how we're picking out movement from what

Ik denk dat dit een ruw idee geeft van hoe we beweging halen uit

Dan's doing, but I think it will also show you, if you look at that movement,

wat Dan doet. Het toont je ook, als je naar die beweging kijkt,

that when Dan makes music, his motions are very purposeful, very precise,

dat Dan muziek maakt met heel doelgerichte bewegingen, heel precies,

very disciplined and they're also very beautiful.

heel gedisciplineerd en ook heel mooi.

So, in hearing this piece, as I mentioned before, the most important thing is

Bij het beluisteren van zijn stuk is, zoals gezegd, het belangrijkste

the music's great, and it'll show you who Dan is.

dat de muziek fantastisch is, en dat ze je zal tonen wie Dan is.

So, are we ready Adam?

Zijn we er klaar voor, Adam?

AB: Yeah.

AB: Ja.

TM: OK, now Dan will play his piece "My Eagle Song" for you.

TM: Dan zal nu zijn stuk "Mijn arendslied" voor jullie spelen.

(Applause)

(Applaus)

TM: Bravo.

TM: Bravo.

(Applause)

(Applaus)