What if You Could Sing in Your Favorite Musician's Voice? | Holly Herndon | TED

Traductor: Cintia Conti Revisor: Almudena Torrecilla

(Overlapping voices sing)

(Cantan voces superpuestas)

(Singing ends)

(Finaliza la canción)

(Applause)

(Aplausos)

Hi, my name is Holly, and I’m an artist.

Hola, me llamo Holly y soy artista.

That was my voice,

Esa era mi voz,

but I didn’t sing that clip.

pero no fui yo quien cantó ese fragmento.

I trained an AI on my own voice,

Entrené a la inteligencia artificial con mi voz

and now she can sing anything in multiple languages.

y ahora puede cantar de todo en diferentes idiomas.

Her name is Holly+,

Se llama Holly+,

and you just heard her perform “El Cant de la Sibilla,”

y acaban de escuchar su interpretación de “El cant de la sibilla”,

which is a traditional song arranged by Maria Arnal in Catalan.

una canción adaptada por María Arnal, tradicional de la lengua catalana,

Not a language that I speak

lengua que yo no hablo

and not a vocal tradition that I've trained in.

y tradición vocal que nunca entrené.

Those melismatic runs are really difficult to hit.

Esos melismas son muy complicados de lograr.

To show you Holly+'s full range, I'll also play an example in German.

Para que vean el rango completo de Holly+ voy a reproducir un fragmento en alemán.

This is "Mack the Knife" by Brecht.

Se llama “Mack the Knife”, de Brecht.

(Singing in German)

(Cantando en alemán)

(Music ends)

(Fin de la canción)

Of course Holly+ can -- thank you.

Por supuesto, Holly+ puede... Gracias.

(Applause)

(Aplausos)

Of course, Holly+ can also perform my own music,

Por supuesto, Holly+ puede interpretar mi propia música.

so here's an excerpt from my own song, "Frontier."

Este es un fragmento de mi canción “Frontier”.

(Singing "Frontier" in overlapping voices)

(Voces superpuestas cantando “Frontier”)

(Singing ends)

(Finaliza la canción)

Holly+ uses a process called timbre transfer,

Holly+ utiliza el proceso de transferencia de timbre

where the timbre, or sound quality of one sound,

en el que el timbre, o la calidad de un sonido,

may be mapped onto the performance of another.

puede conectarse a la representación de otro.

Timbre transfer is done by creating a machine-learning model of a sound.

La transferencia crea un modelo de aprendizaje automático del sonido.

In this case, it's my voice.

En este caso, mi voz.

So I recorded a wide variety of phrases in my entire vocal range.

Así que grabé muchas frases abarcando mi rango vocal completo.

To be clear, this version of Holly+ is reading notes from a score.

Por aclarar, esta versión de Holly+ lee las notas de una partitura.

So I'll also play you an example of her singing in Spanish,

Ahora, voy a reproducir un fragmento en el que Holly+ canta en español.

“Bésame Mucho” by Velázquez.

La canción es “Bésame mucho”, de Consuelo Velázquez.

(Music: "Bésame Mucho")

(Cantando “Bésame mucho”)

(Music ends)

(Fin de la canción)

Thank you.

Gracias.

(Applause)

(Aplausos)

I can't speak Spanish, by the way, so.

Por cierto, no sé hablar español.

Teaching an AI the sonic properties of one sound

La IA aprende las propiedades de un sonido

in order to generate an entirely new sound

para generar un sonido nuevo. A eso lo llamo ”spawning”.

is what I like to call "spawning."

Spawning is what allows Holly+ to create a wide range of vocals

El ”spawning” es lo que permite a Holly+ crear un rango de voces,

that I didn't sing

que yo no he cantado,

from a set of recorded phrases that I did sing.

a partir de un grupo de frases grabadas que sí había cantado.

I like to think of spawning as a kind of 21st-century corollary

Considero al ”spawning” como la adaptación al siglo XXI

to the musical tradition of sampling,

de la tradición musical del sampleado,

which had a really big impact on both music and intellectual property.

que tuvo un gran impacto en la propiedad intelectual y musical.

But I think spawning is far more exciting and potentially really weird.

Pero el spawning me parece más apasionante y con un potencial desconcertante.

(Laughter)

(Risas)

So, for example, with sampling,

Por ejemplo, en el sampleado,

usually you copy and remix a recording by someone else to create something new.

copiamos y remezclamos la grabación de otra persona para crear algo nuevo.

But with spawning, you can perform as someone else

Pero en el spawning, podemos cantar como si fuéramos otra persona,

based on trained information about them.

basándonos en su información personal.

And as an artist, this is making me rethink my own past work

Y, como artista, esto me hace reflexionar sobre mis obras en general,

as not only my archive

ya que no solo mi archivo,

but potentially also I myself could become reanimated with AI.

sino que también yo misma podría ser reanimada por la IA.

This also opens up the question

Esto saca a relucir la cuestión

of how we deal with a collective human archive

de cómo tratar un archivo colectivo humano si podemos reanimar grabaciones antiguas.

if we can reanimate old media.

It opens up really big ethical

Aquí es donde surgen preguntas éticas y de propiedad intelectual

and intellectual property questions

that require entirely new conceptual and legal frameworks.

que exigen marcos legales y conceptuales completamente nuevos.

One way that I like to think about intellectual property

Pienso en la propiedad intelectual como un juego

I call identity play.

al que llamo “juego de identidad”.

So rather than limiting the use of my voice,

Así que, en lugar de limitar el uso de mi voz

I'm creating instruments to allow as many people as possible

creo instrumentos que le permitan a la mayor cantidad de gente posible

to create music with me, and even as me.

hacer música conmigo e incluso como si fueran yo misma.

That's why I've made versions of Holly+ freely available

Por eso creé versiones gratuitas de Holly+ disponibles en internet para uso público.

for anyone to use online.

If I can allow people to play with my IP,

Si permito que la gente juegue con mi propiedad intelectual,

my digital identity, my intellectual property,

mi identidad digital, mi propiedad intelectual,

what might they come up with?

¿Qué podrían llegar a hacer con todo eso?

Could someone else go on tour as me, with my permission?

Si le diera mi permiso a alguien, ¿podría ir de gira suplantándome?

Could I be in a thousand different bands in multiple languages?

¿Acabaría yo estando en miles de bandas cantando en distintos idiomas?

And what would that even sound like?

Y ¿cómo sonaría?

To be clear, musicians have been taught to be really protective over our IP,

Aclaro, como profesionales de la música siempre se nos enseñó a cuidar nuestra PI

and that's for really good reason.

y por una buena razón.

But I'm trying to think of ways to make this new capability mutually beneficial.

Pero trato de pensar cómo hacer esta nueva función doblemente ventajosa.

So to allow people to use my voice

Es decir, permitir que otros usen mi voz

but still to maintain the ability to approve certain derivative works.

y al mismo tiempo mantener la capacidad de aprobar ciertas obras derivadas.

So I invite you to consider, if given the opportunity,

Por eso, los invito a que piensen: si se diera la oportunidad,

who would you like to perform through?

¿como quién les gustaría cantar?

And can you imagine someone else performing you?

Y ¿podrían imaginar a alguien más cantando como si fueran ustedes?

With that in mind,

Con eso en mente

I'd like to invite the incredible musician Pher to the stage.

me gustaría invitar al escenario al increíble músico Pher.

(Applause)

(Aplausos)

So today, Pher will be performing his own song, "Murky."

En esta ocasión, Pher va a interpretar su propia canción “Murky”.

And with one microphone you'll hear Pher's beautiful, natural voice.

Con un micrófono van a escuchar su hermosa voz natural.

(Pher vocalizing)

(Vocalización de Pher)

(Audience cheers)

(Vítores)

And with this microphone,

Y con este otro micrófono,

you'll hear a live version of Holly+ developed with Voctro Labs.

podrán oír una versión en vivo de Holly+, creada con la tecnología de Voctro Labs.

(Pher vocalizing in Holly+ voice)

(Vocalización de Pher con voz de Holly+)

(Laughter and applause)

(Risas y aplausos)

Take it away Pher.

¡Vamos, Pher!

(Pher singing "Murky")

(Pher cantando “Murky”)

It gets so murky

Se vuelve tan oscuro

Loving what you know

Amar tu saber

But I, I keep on swimming,

Aún sigo, sigo nadando

I'm swimming

Sigo nadando

Further up the road

Sin querer volver

See, the problem is,

¿No ves la cuestión?

I don't know what to say

No sé qué decir

When you come around

Cuando vienes a mí

Acting this way

Y actúas así

Oh oh

Oh oh

And, yes, the truth is

Y es verdad

I show you every day

Te demuestro ayer y hoy

Cause you love to stay

Porque amas quedarte

(Applause)

(Aplausos)

Living in all the pain

Viviendo en el dolor

And it gets so murky

Y se vuelve tan oscuro

Loving what you know

Amar tu saber

But I'll keep on swimming

Pero seguiré nadando

Further up the road

Sin querer volver

And I've been calling out

Y llamé

Calling out your name

Tu nombre llamé

Deep down in my sleep

En lo profundo de mis sueños

And I even memorized your face

Y tu rostro memoricé

So ain't no leaving' me

Así no me abandona

And I just handle my biz

Observo mi sentir

And keep the train moving on

Dejo las cosas fluir

And you know what it is

Y tú ya lo sabes

Is just you that

Solo a ti es a quien

I'm choosing

Elijo

Cause it gets so murky

Porque se vuelve tan oscuro

Loving what you know

Amar tu saber

And I'll

Y yo

I'll keep on swimming

Seguiré nadando

Further up the road

Sin querer volver

And it gets so murky

Y se vuelve tan oscuro

Loving what you know

Amar tu saber

And I’ll,

Y yo

I'll keep on swimming

Seguiré nadando

Further up the road

Sin querer volver

Swimming

Nadando

I'm swimming

Sigo nadando

Further up the road

Sin querer volver

And I'll keep on swimming

Y seguiré nadando

Swimming

Nadando

Further up the road

Sin querer volver

(Vocalizing)

(Vocalización)

(Cheers and applause)

(Vítores y aplausos)

Holly Herndon: Thank you.

Holly Herndon: Gracias.

Thank you.

Gracias.