How AI could compose a personalized soundtrack to your life | Pierre Barreau

Переводчик: Alena Chernykh Редактор: Pavel Yudaev

About two and a half years ago, I watched this movie called "Her."

Около двух с половиной лет назад я смотрел фильм под названием «Она».

And it features Samantha, a superintelligent form of AI

В главной роли Саманта — сверхразумная форма ИИ,

that cannot take physical form.

которая не может принимать физическую форму.

And because she can't appear in photographs,

И так как её нельзя сфотографировать,

Samantha decides to write a piece of music

Саманта решает сочинить музыкальный отрывок,

that will capture a moment of her life just like a photograph would.

который запечатлит момент её жизни, так же, как это делает фотография.

As a musician and an engineer, and someone raised in a family of artists,

Как музыкант и инженер, и к тому же выросший в семье художников,

I thought that this idea of musical photographs was really powerful.

я подумал, что идея музыкальных фотографий была бы поистине великой.

And I decided to create an AI composer.

И я решил создать ИИ, который бы сочинял музыку.

Her name is AIVA, and she's an artificial intelligence

Её зовут AIVA, она искусственный интеллект,

that has learned the art of music composition

который изучил искусство создания музыки,

by reading over 30,000 scores of history's greatest.

прочитав свыше 30 000 великих мировых произведений.

So here's what one score looks like to the algorithm

Вот как выглядит одно из них

in a matrix-like representation.

в матричном представлении.

And here's what 30,000 scores,

А вот как 30 000 произведений,

written by the likes of Mozart and Beethoven,

созданных Моцартом, Бетховеном и им подобными,

look like in a single frame.

выглядят на одном изображении.

So, using deep neural networks, AIVA looks for patterns in the scores.

Используя многослойные нейронные сети, AIVA ищет шаблоны в этих записях.

And from a couple of bars of existing music,

И на основе пары тактов существующей музыки

it actually tries to infer what notes should come next in those tracks.

она фактически пытается угадать следующие ноты в этих треках.

And once AIVA gets good at those predictions,

И когда AIVA поднатореет в этих предсказаниях,

it can actually build a set of mathematical rules

она реально может создать совокупность математических правил

for that style of music

для этого музыкального стиля,

in order to create its own original compositions.

чтобы сочинять свои собственные оригинальные композиции.

And in a way, this is kind of how we, humans, compose music, too.

И в некотором смысле это похоже на то, как мы, люди, сочиняем музыку.

It's a trial-and-error process,

Это процесс проб и ошибок,

during which we may not get the right notes all the time.

во время которого мы не можем всё время придумывать правильные ноты.

But we can correct ourselves,

Но мы можем исправлять ошибки

either with our musical ear or our musical knowledge.

благодаря своему музыкальному слуху или знаниям музыки.

But for AIVA, this process is taken from years and years of learning,

Но для AIVA этот процесс вместо долгих лет обучения,

decades of learning as an artist, as a musician and a composer,

десятилетий опыта художника, музыканта и композитора,

down to a couple of hours.

уменьшился до пары часов.

But music is also a supersubjective art.

Но музыка — это очень субъективное искусство.

And we needed to teach AIVA

Нужно было научить АIVA,

how to compose the right music for the right person,

как сочинять музыку для конкретного человека,

because people have different preferences.

потому что у разных людей разные предпочтения в музыке.

And to do that, we show to the algorithm over 30 different category labels

Для этой цели мы показываем алгоритму свыше 30 различных категорий признаков

for each score in our database.

для каждого произведения в нашей базе данных.

So those category labels are like mood

Это такие категории, как настроение,

or note density or composer style of a piece

плотность нот, стиль композитора в произведении

or the epoch during which it was written.

или эпоха, когда было создано это произведение.

And by seeing all this data,

И анализируя эти данные,

AIVA can actually respond to very precise requirements.

AIVA в самом деле может реагировать на конкретные требования.

Like the ones, for example, we had for a project recently,

Например, недавно у нас был проект,

where we were commissioned to create a piece

где нам поручили создать отрывок-реминисценцию саундтрека

that would be reminiscent of a science-fiction film soundtrack.

к научно-фантастическому фильму.

And the piece that was created is called "Among the Stars"

Мы назвали созданную композицию «Среди звёзд»,

and it was recorded with CMG Orchestra in Hollywood,

она была записана голливудским оркестром CMG,

under great conductor John Beal,

дирижёром которого является великий Джон Бил,

and this is what they recorded, made by AIVA.

и вот отрывок, созданный AIVA, который они записали.

(Music)

(Музыка)

(Music ends)

(Музыка заканчивается)

What do you think?

Как вам?

(Applause)

(Аплодисменты)

Thank you.

Спасибо.

So, as you've seen, AI can create beautiful pieces of music,

Как видите, AIVA может сочинять довольно красивую музыку,

and the best part of it

и самое замечательное,

is that humans can actually bring them to life.

что люди фактически могут вдохнуть в неё жизнь.

And it's not the first time in history

Это не первый раз в истории,

that technology has augmented human creativity.

когда технология дополняет творчество человека.

Live music was almost always used in silent films

Живая музыка почти всегда использовалась в немом кино,

to augment the experience.

чтобы создать атмосферу.

But the problem with live music is that it didn't scale.

Но проблема живой музыки в том, что её нельзя масштабировать.

It's really hard to cram a full symphony into a small theater,

Очень сложно втиснуть симфонический оркестр в маленький театр,

and it's really hard to do that for every theater in the world.

и ещё сложнее это сделать для каждого театра в мире.

So when music recording was actually invented,

И когда была изобретена возможность записи музыки,

it allowed content creators, like film creators,

это позволило кинопродюсерам добиться,

to have prerecorded and original music

чтобы записанная оригинальная музыка

tailored to each and every frame of their stories.

подходила каждому кадру их фильмов.

And that was really an enhancer of creativity.

И это очень сильно способствовало творчеству.

Two and a half years ago, when I watched this movie "Her,"

Два с половиной года назад, когда я смотрел фильм «Она»,

I thought to myself that personalized music

я подумал, что персонализированная музыка

would be the next single biggest change in how we consume and create music.

будет следующим огромным изменением того, как мы слушаем и создаём музыку.

Because nowadays, we have interactive content, like video games,

Потому что сегодня интерактивный контент, такой как видеоигры,

that have hundreds of hours of interactive game plays,

имеет сотни часов интерактивных действий,

but only two hours of music, on average.

а длина музыки в среднем всего лишь пара часов.

And it means that the music loops and loops and loops

И это означает, что музыка повторяется, повторяется

over and over again, and it's not very immersive.

снова и снова, а это не очень захватывающе.

So what we're working on is to make sure that AI can compose

И то, над чем мы сейчас работаем, — это убедиться, что ИИ может создавать

hundreds of hours of personalized music

сотни часов персонифицированной музыки

for those use cases where human creativity doesn't scale.

для тех случаев, на которые не распространяются творчество человека.

And we don't just want to do that for games.

Мы хотим сделать это не только для видеоигр.

Beethoven actually wrote a piece for his beloved, called "Für Elise,"

Бетховен создал пьесу для своей возлюбленной и назвал его «К Элизе».

and imagine if we could bring back Beethoven to life.

Представьте, что мы смогли бы вернуть к жизни Бетховена.

And if he was sitting next to you, composing a music for your personality

И если бы он сел рядом с вами и начал сочинять музыку лично для вас,

and your life story.

музыку для вашей жизни?

Или представьте, как у кого-нибудь вроде Мартина Лютера Кинга, например,

Or imagine if someone like Martin Luther King, for example,

had a personalized AI composer.

был бы свой личный ИИ-композитор.

Maybe then we would remember

Возможно, тогда мы бы помнили

"I Have a Dream" not only as a great speech,

«У меня была мечта» не только как великую речь,

but also as a great piece of music, part of our history,

но и как великое музыкальное произведение, часть истории,

and capturing Dr. King's ideals.

запечатлевшее идеалы доктора Кинга.

And this is our vision at AIVA:

Это наше видение AIVA:

to personalize music so that each and every one of you

персонализировать музыку, чтобы каждый из вас

and every individual in the world

и абсолютно каждый человек во всём мире

can have access to a personalized live soundtrack,

смог иметь доступ с своему личному живому саундтреку,

based on their story and their personality.

в основе которого бы была их судьба и индивидуальность.

So this moment here together at TED is now part of our life story.

Это время, проведённое здесь вместе на TED, — теперь часть нашей жизни.

So it only felt fitting that AIVA would compose music for this moment.

И нам показалось уместным, чтобы AIVA сочинила музыку для этого момента.

And that's exactly what we did.

И вот что мы сделали.

So my team and I worked on biasing AIVA on the style of the TED jingle,

Я и моя команда работали над созданием стиля джингла TED

and on music that makes us feel a sense of awe and wonder.

и музыки, которая заставляет нас испытывать чувство трепета и изумления.

And the result is called "The Age of Amazement."

Результат называется «Удивительная Эпоха».

Didn't take an AI to figure that one out.

Не использовали ИИ, чтобы выяснить это.

(Laughter)

(Смех)

And I couldn't be more proud to show it to you,

Я очень горжусь тем, что представляю её вам.

so if you can, close your eyes and enjoy the music.

Поэтому можете закрыть глаза и наслаждаться музыкой.

Thank you very much.

Большое спасибо.

(Music)

(Музыка)

[The Age of Amazement Composed by AIVA]

[Удивительная Эпоха. Композитор AIVA]

(Music ends)

(Музыка заканчивается)

This was for all of you.

Это было для всех вас.

Thank you.

Спасибо.

(Applause)

(Аплодисменты)