What if You Could Sing in Your Favorite Musician's Voice? | Holly Herndon | TED

Переводчик: Alena Chernykh Редактор: Elena Malykh

(Overlapping voices sing)

(Поют перекрывающиеся голоса)

(Singing ends)

(Пение заканчивается)

(Applause)

(Аплодисменты)

Hi, my name is Holly, and I’m an artist.

Привет, меня зовут Холли, я певица и композитор.

That was my voice,

Это был мой голос,

but I didn’t sing that clip.

но не я пела в этом клипе.

I trained an AI on my own voice,

Я обучила ИИ своему собственному голосу,

and now she can sing anything in multiple languages.

и теперь она может петь что угодно на нескольких языках.

Her name is Holly+,

Её зовут Холли+,

and you just heard her perform “El Cant de la Sibilla,”

и вы только что слышали, как она исполняет «Сивиллину песню».

which is a traditional song arranged by Maria Arnal in Catalan.

это народная песня в аранжировке Марии Арналь на каталонском языке.

Not a language that I speak

Я не владею этим языком,

and not a vocal tradition that I've trained in.

и я не обучалась в этой вокальной традиции.

Those melismatic runs are really difficult to hit.

В эти мелизмы, действительно, трудно попасть.

To show you Holly+'s full range, I'll also play an example in German.

Чтобы показать вам весь диапазон Холли+, я также приведу пример на немецком.

This is "Mack the Knife" by Brecht.

Это «Баллада о Мэкки-Ноже» Брехта.

(Singing in German)

(Пение на немецком языке)

(Music ends)

(Музыка заканчивается)

Of course Holly+ can -- thank you.

А Холли+, конечно же, умеет. Спасибо.

(Applause)

(Аплодисменты)

Of course, Holly+ can also perform my own music,

Конечно, Холли+ может исполнить и мою собственную музыку,

so here's an excerpt from my own song, "Frontier."

поэтому вот отрывок из моей собственной песни «Рубеж».

(Singing "Frontier" in overlapping voices)

(Пение композиции «Рубеж» перекрывающимися голосами)

(Singing ends)

(Пение заканчивается)

Holly+ uses a process called timbre transfer,

Холли+ использует процесс, называемый передачей тембра,

where the timbre, or sound quality of one sound,

при котором тембр или качество звучания одного звука

may be mapped onto the performance of another.

могут быть сопоставлены с качеством звучания другого.

Timbre transfer is done by creating a machine-learning model of a sound.

Передача тембра происходит путём создания модели звука с помощью машинного обучения.

In this case, it's my voice.

В данном случае это мой голос.

So I recorded a wide variety of phrases in my entire vocal range.

Поэтому я записала множество фраз во всем своём вокальном диапазоне.

To be clear, this version of Holly+ is reading notes from a score.

Чтобы было понятно, эта версия Холли+ представляет собой чтение нот с листа.

So I'll also play you an example of her singing in Spanish,

Поэтому я также покажу вам, как она поет на испанском

“Bésame Mucho” by Velázquez.

«Bésame Mucho» Консуэло Веласкес.

(Music: "Bésame Mucho")

(Звучит «Bésame Mucho»)

(Music ends)

(Музыка заканчивается)

Thank you.

Спасибо.

(Applause)

(Аплодисменты)

I can't speak Spanish, by the way, so.

Кстати, я не говорю по-испански, так-то.

Teaching an AI the sonic properties of one sound

Обучение ИИ звуковым свойствам одного звука

in order to generate an entirely new sound

с целью создания совершенно нового звука —

is what I like to call "spawning."

это то, что я называю «порождением».

Spawning is what allows Holly+ to create a wide range of vocals

Это то, что позволяет Холли+ создавать широкий спектр вокальных партий,

that I didn't sing

которые я не пела,

from a set of recorded phrases that I did sing.

из набора записанных фраз, которые я пела.

I like to think of spawning as a kind of 21st-century corollary

Мне нравится думать о порождении как о своего рода продолжении

to the musical tradition of sampling,

музыкальной традиции отбора образцов в XXI веке,

which had a really big impact on both music and intellectual property.

сильно повлиявшую и на музыку, и на интеллектуальную собственность.

But I think spawning is far more exciting and potentially really weird.

Но порождение — это более захватывающее и действительно странное занятие.

(Laughter)

(Смех)

So, for example, with sampling,

Так, например, при отборе или сэмплинге

usually you copy and remix a recording by someone else to create something new.

вы обычно копируете и микшируете чужую запись, чтобы создать что-то новое.

But with spawning, you can perform as someone else

Но при порождении вы можете выступать от имени другого лица,

based on trained information about them.

основываясь на информации о нем.

And as an artist, this is making me rethink my own past work

И как артистку, это заставляет меня переосмыслить свои прошлые работы,

as not only my archive

так как не только мой архив,

but potentially also I myself could become reanimated with AI.

но и я сама могу возродиться с помощью искусственного интеллекта.

This also opens up the question

Возникает вопрос,

of how we deal with a collective human archive

как мы будем обращаться с коллективным архивом,

if we can reanimate old media.

если сможем реанимировать старые медиа.

It opens up really big ethical

Возникают серьёзные вопросы этики

and intellectual property questions

и интеллектуальной собственности,

that require entirely new conceptual and legal frameworks.

которые требуют совершенно новых концептуальных и правовых рамок.

One way that I like to think about intellectual property

Мой вариант использования интеллектуальной собственности —

I call identity play.

это игра на индивидуальности.

So rather than limiting the use of my voice,

Поэтому вместо ограничения использования своего голоса,

I'm creating instruments to allow as many people as possible

я создаю инструменты, позволяющие наибольшему количеству людей

to create music with me, and even as me.

создавать музыку вместе со мной и даже как я.

That's why I've made versions of Holly+ freely available

Вот почему я сделала версии Холли+ доступными

for anyone to use online.

для всех желающих в Интернете.

If I can allow people to play with my IP,

Если я смогу разрешить людям играть с моим IP-адресом,

my digital identity, my intellectual property,

моей цифровой идентификацией, моими авторскими правами,

what might they come up with?

что они могут придумать?

Could someone else go on tour as me, with my permission?

Сможет ли кто-нибудь другой поехать в турне вместо меня, с моего разрешения?

Could I be in a thousand different bands in multiple languages?

Смогу ли я играть в тысяче разных групп на разных языках?

And what would that even sound like?

И как это вообще будет звучать?

To be clear, musicians have been taught to be really protective over our IP,

Поясню, музыкантов учат защищать свой IP,

and that's for really good reason.

и на то есть веские причины.

But I'm trying to think of ways to make this new capability mutually beneficial.

Но я пытаюсь придумать, как сделать эту новую возможность взаимовыгодной.

So to allow people to use my voice

Позволить людям использовать мой голос,

but still to maintain the ability to approve certain derivative works.

но при этом сохранить возможность одобрять некоторые производные работы.

So I invite you to consider, if given the opportunity,

Поэтому я предлагаю вам подумать, если представится такая возможность,

who would you like to perform through?

с кем бы вы хотели выступить?

And can you imagine someone else performing you?

И можете ли вы представить, что кто-то другой выступит за вас?

With that in mind,

И поэтому

I'd like to invite the incredible musician Pher to the stage.

я бы хотела пригласить на сцену потрясающего музыканта, это Фер.

(Applause)

(Аплодисменты)

So today, Pher will be performing his own song, "Murky."

Поэтому сегодня он исполнит свою собственную песню “Murky”.

And with one microphone you'll hear Pher's beautiful, natural voice.

И с помощью одного микрофона вы услышите его красивый, естественный голос.

(Pher vocalizing)

(Фер поёт)

(Audience cheers)

(Возгласы аудитории)

And with this microphone,

А вот через этот микрофон

you'll hear a live version of Holly+ developed with Voctro Labs.

вы услышите живую версию Холли+, разработанную в Voctro Labs.

(Pher vocalizing in Holly+ voice)

(Пение голосом Холли+)

(Laughter and applause)

(Смех и аплодисменты)

Take it away Pher.

Убери его пока, Фер.

(Pher singing "Murky")

(Фер поёт «Murky»)

It gets so murky

Становится так печально

Loving what you know

любить, и ты это знаешь.

But I, I keep on swimming,

Но я продолжаю плыть,

I'm swimming

я плыву

Further up the road

дальше вперёд.

See, the problem is,

Пойми, проблема в том,

I don't know what to say

что я не знаю, что говорить,

When you come around

когда ты рядом

Acting this way

и ведёшь себя так.

Oh oh

О, о...

And, yes, the truth is

И, да, правда в том, что

I show you every day

я указываю тебе на это каждый день,

Cause you love to stay

потому что ты любишь

(Applause)

(Аплодисменты)

Living in all the pain

жить в страдании.

And it gets so murky

И становится так печально

Loving what you know

от любви, ты это знаешь.

But I'll keep on swimming

Но я продолжаю плыть

Further up the road

дальше вперёд.

And I've been calling out

И я звал и зову тебя...

Calling out your name

Зову по имени...

Deep down in my sleep

Глубоко внутри себя, во сне.

And I even memorized your face

И я даже запомнил твое лицо,

So ain't no leaving' me

так что, не оставляй меня.

And I just handle my biz

И я просто занимаюсь своими делами,

And keep the train moving on

а поезд пусть едет дальше.

And you know what it is

И ты знаешь,

Is just you that

что я выбираю

I'm choosing

только тебя,

Cause it gets so murky

потому что становится печально

Loving what you know

от любви, ведь ты это знаешь.

And I'll

И я буду,

I'll keep on swimming

я продолжу плыть

Further up the road

дальше вперёд.

And it gets so murky

И становится так печально

Loving what you know

от любви, ведь ты это знаешь..

And I’ll,

И я буду,

I'll keep on swimming

я продолжу плыть

Further up the road

дальше вперёд.

Swimming

Плыву,

I'm swimming

я плыву

Further up the road

дальше вперёд.

And I'll keep on swimming

И я продолжу плыть,

Swimming

плыть

Further up the road

дальше вперёд.

(Vocalizing)

(Пение)

(Cheers and applause)

(Возгласы и аплодисменты)

Holly Herndon: Thank you.

Холли Херндон: Спасибо.

Thank you.

Спасибо.