AI-Generated Creatures That Stretch the Boundaries of Imagination | Sofia Crespo | TED

Переводчик: Elena McDonnell Редактор: Yulia Kallistratova

I'd like to start by asking you to imagine a color

Попробуйте представить себе цвет,

that you've never seen before.

которого вы в жизни не видели.

Just for a second give this a try.

Только попытайтесь.

Can you actually visualize a color that you've never been able to perceive?

Можете ли вы визуально представить цвет, не воспринимаемый глазом?

I never seem to get tired of trying this

Этот эксперимент мне никогда не надоедает,

although I know it's not an easy challenge.

хотя я знаю, что это задача не из лёгких.

And the thing is,

На самом деле

we can't imagine something without drawing upon our experiences.

мы не можем представить себе того, что не связано с нашим прошлым опытом.

A color we haven't yet seen

Цвет, который мы никогда не видели

outside the spectrum we can perceive

и находящийся за пределами воспринимаемого нами спектра,

is outside our ability to conjure up.

мы просто не способны вообразить.

It's almost like there's a boundary to our imagination

Как будто у нашего воображения есть чёткие границы,

where all the colors we can imagine

и цвета, которые мы можем представить,

can only be various shades of other colors we have previously seen.

могут быть лишь оттенками цветов, которые мы видели раньше.

Yet we know for a fact

Однако нет сомнений в том,

that those color frequencies outside our visible spectrum are there.

что существуют цветовые частоты за пределами видимого нам спектра.

And scientists believe that there are species

Учёные полагают, что у некоторых видов животных

that have many more photo receptors

гораздо больше фоторецепторов,

than just the three color ones we humans have.

чем у людей, у которых цветовых рецепторов всего три.

Which, by the way,

И помимо этого,

not all humans see the world in the same way.

даже не все люди видят мир одинаково.

Some of us are colorblind to various degrees,

У многих из нас дальтонизм в разных формах,

and very often we don't even agree on small things,

и зачастую мы не можем достичь согласия даже в отношении таких мелочей,

like if a dress on the internet is blue and black or white and gold.

как цвет платья в Интернете — голубое с чёрным или белое с золотым?

But my favorite creature, one of my favorite creatures,

Одно из моих любимых живых существ —

is the peacock mantis shrimp,

это цветной рак-богомол,

which is estimated to have 12 to 16 photo receptors.

у которого от 12 до 16 фоторецепторов.

And that indicates the world to them might look so much more colorful.

А это значит, что мир выглядит для него гораздо более красочным.

So what about artificial intelligence?

А искусственный интеллект?

Can AI help us see beyond our human capabilities?

Может ли он выйти за пределы человеческих возможностей?

Well, I've been working with AI for the past five years,

Я работаю с ИИ уже пять лет,

and in my experience, it can see within the data it gets fed.

и, на мой взгляд, он видит только на основании данных, которые получает.

But then you might be wondering, OK,

В этом случае, возможно, вы думаете:

if AI can't help imagine anything new,

«Если ИИ не может представить ничего нового,

why would an artist see any point in using it?

какой смысл художникам его использовать?»

And my answer to that is because I think that it can help augment our creativity

Мой ответ таков: я считаю, что он помогает усилить наши творческие способности,

as there's value in creating combinations of known elements to form new ones.

создавая новые сочетания уже известных нам элементов.

And this boundary of what we can imagine based on what we have experienced

И именно эти границы нашего воображения, обусловленные нашим опытом,

is the place that I have been exploring.

я в последнее время изучаю.

For me, it started with jellyfish on a screen at an aquarium

А началось всё с медузы на экране в океанариуме

and wearing those old 3D glasses, which I hope you remember,

и старых стереоочков — надеюсь, вы помните такие —

the ones with the blue and red lens.

с синей и красной линзами.

And this experience made me want to recreate their textures.

После этого мне захотелось воссоздать их текстуру.

But not just that,

И не только.

I also wanted to create new jellyfish

Я также захотела создать новых медуз,

that I hadn't seen before, like these.

каких не видела раньше, — вот таких.

And what started with jellyfish,

Всё началось с медуз,

very quickly escalated to other sea creatures

но очень быстро распространилось на других морских существ:

like sea anemone, coral and fish.

актинии, кораллы и рыб.

And then from there came amphibians, birds and insects.

Вскоре к ним добавились земноводные, птицы и насекомые.

And this became a series called “Neural Zoo”.

На этой основе была создана серия «Нейросетевой зоопарк».

But when you look closely, what do you see?

Но если посмотреть внимательно, что вы видите?

There's no single creature in these images.

Эти картинки — сочетания нескольких животных.

And AI augments my creative process

ИИ расширяет мой рабочий процесс,

by allowing me to distill and recombine textures.

позволяя мне выделять и по-новому сочетать разные текстуры.

And that's something that would otherwise take me months to draw by hand.

Без ИИ у меня бы ушли месяцы на то, чтобы нарисовать это от руки.

Plus I'm actually terrible at drawing.

Более того, я очень плохо рисую.

So you could say, in a way, what I'm doing

Иначе говоря, то, что я делаю, —

is a contemporary version of something

это современная версия того,

that humans have already been doing for a long time,

что человечество делало веками,

even before cameras existed.

задолго до изобретения фотоаппаратов.

In medieval times,

В Средние века

people went on expeditions,

люди отправлялись в походы,

and when they came back they would share about what they saw

а когда возвращались, рассказывали о том, что видели,

to an illustrator.

живописцам.

And the illustrator, having never seen what was being described,

Живописцы, сами никогда не видавшие этого,

would end up drawing

рисовали,

based on the creatures that they had previously seen

взяв за основу знакомых им существ

and in the process creating hybrid animals of some sort.

и таким образом создавая неких гибридных животных.

So an explorer might describe a beaver, but having never seen one,

Скажем, путешественник мог описать бобра, но так как живописец никогда его не видел,

the illustrator might give it the head of a rodent,

он мог наделить его головой грызуна,

the body of a dog and a fish-like tail.

телом собаки и рыбьим хвостом.

In the series “Artificial Natural History”,

Для создания серии «Неестественное естествознание»

I took thousands of illustrations from a natural history archives,

я собрала тысячи иллюстраций из архивов

and I fed them to a neural network to generate new versions of them.

и ввела их в нейронную сеть, чтобы создать новые версии.

But up until now, all my work was done in 2D.

До недавнего времени все мои работы были двухмерными.

And with the help of my studio partner, Feileacan McCormick,

Но вместе с моим партнёром по студии Файликаном Маккормиком

we decided to train a neural network on a data set of 3D scanned beetles.

мы решили обучить нейронную сеть с помощью набора данных

на основе жуков, отсканированных в формате 3D.

But I must warn you that our first results were extremely blurry,

Сразу предупреждаю: наши первые результаты были очень нечёткими

and they looked like the blobs you see here.

и выглядели вот такими бесформенными штуками.

And this could be due to many reasons,

На то может быть много причин,

but one of them being that there aren't really a lot

но одна из них — это то,

of openly available data sets of 3D insects.

что в открытом доступе очень мало наборов данных насекомых в формате 3D.

And also we were repurposing

Более того, мы использовали

a neural network that normally gets used to generate images to generate 3D.

для 3D нейронную сеть, обычно используемую для создания изображений.

So believe it or not, these are very exciting blobs to us.

Так что, как ни странно, эти штуки для нас — большое достижение.

But with time and some very hacky solutions

Но со временем и не без помощи хаков,

like data augmentation,

например аугментации данных,

where we threw in ants and other beetle-like insects

когда мы добавили туда муравьёв и других насекомых типа жуков,

to enhance the data set,

чтобы расширить набор данных,

we ended up getting this,

результаты стали вот такими.

which we've been told they look like grilled chicken.

Нам говорили, что это похоже на цыплят-гриль.

(Laughter)

(Смех)

But hungry for more, we pushed our technique,

Но нам хотелось большего, и мы продолжали работать.

and eventually they ended up looking like this.

И в какой-то момент они стали выглядеть вот так.

We use something called 3D style transfer to map textures onto them,

Мы используем технологию под названием перенос стиля 3D

для нанесения на них текстур.

and we also trained a natural language model

Мы также обучили модель на базе естественного языка

to generate scientific-like names

для создания научных названий

and anatomical descriptions.

и анатомических описаний.

And eventually we even found a network architecture that could handle 3D meshes.

И наконец, мы нашли архитектуру нейросети, способную работать с 3D-сетками.

So they ended up looking like this.

И они стали выглядеть вот так.

And for us, this became a way of creating kind of a speculative study --

Это позволило нам создать некое теоретическое исследование...

(Applause)

(Аплодисменты)

A speculative study of creatures that never existed,

Теоретическое исследование нереальных существ,

kind of like a speculative biology.

нечто сродни теоретической биологии.

But I didn't want to talk about AI and its potential

Но меня интересовал ИИ и его возможности,

unless it brought me closer to a real species.

только если это приближало меня к реальным биологическим видам.

Which of these do you think is easier to find data about online?

Как вы думаете, о каком из этих видов легче найти данные в Интернете?

(Laughter)

(Смех)

Yeah, well, as you guessed correctly, the red panda.

Наверняка вы угадали — о малых пандах.

And this maybe could be due to many reasons,

Возможно, на то много причин,

but one of them being how cute they are,

но одна из них — это то, какие они симпатичные,

which means we photograph and talk about them a lot,

а это значит, что мы часто их фотграфируем и говорим о них,

unlike the boreal felt lichen.

в отличие от лишайника вида Erioderma pedicellatum.

But both of them are classified as endangered.

Но оба этих вида находятся под угрозой исчезновения.

So I wanted to bring visibility to other endangered species

Поэтому я хочу сделать более известными другие редкие виды,

that don't get the same amount of digital representation

которые не так хорошо представлены в Интернете,

as a cute, fluffy red panda.

как хорошенькие и пушистые рыжие панды.

And to do this,

Для этого

we trained an AI on millions of images of the natural world,

мы обучили ИИ с помощью миллионов фотографий животного мира,

and then we prompted with text

а затем дали текстовые подсказки

to generate some of these creatures.

для создания этих существ.

So when prompted with a text,

Например, когда мы ввели

"an image of a critically endangered spider, the peacock tarantula"

«изображение находящегося на грани исчезновения паука,

ультрамаринового птицееда»

and its scientific name,

и его латинское название,

our model generated this.

наша модель выдала вот это.

And here's an image of the real peacock tarantula,

А вот фото настоящего ультрамаринового птицееда —

which is a wonderful spider endemic to India.

замечательного паука, обитающего в Индии.

But when prompted with a text

Однако, когда мы ввели

"an image of a critically endangered bird, the mangrove finch,"

«изображение находящейся на гране исчезновения птицы,

мангрового древесного вьюрка»,

our model generated this.

наша модель выдала вот что.

And here's a photo of the real mangrove finch.

А вот фото настоящего мангрового древесного вьюрка.

Both these creatures exist in the wild,

Оба этих вида существуют в природе,

but the accuracy of each generated image is fully dependent on the data available.

но точность выдаваемого изображения полностью зависит от доступных данных.

These chimeras of our everyday data

Эти химеры наших данных

to me are a different way of how the future could be.

мне кажутся новым способом взглянуть на будущее.

Not in a literal sense, perhaps,

Возможно, не в буквальном смысле,

but in the sense that through practicing the expanding of our own imagination

а в том, что, учась расширять границы нашего воображения

about the ecosystems we are a part of,

об экосистеме, в которой мы живём,

we might just be better equipped to recognize new opportunities

мы сможем быстрее и проще распознавать новые возможности

and potential.

и потенциал.

Knowing that there's a boundary to our imagination

Понимание того, что у нашего воображения есть границы,

doesn't have to feel limiting.

необязательно должно быть препятствием.

On the contrary,

Наоборот,

it can help motivate us to expand that boundary further

это может мотивировать нас на расширение этих границ

and to seek out colors and things we haven't yet seen

и поиск цветов и явлений, с которыми мы не сталкивались раньше,

and perhaps enrich our imagination as a result.

и, возможно, в результате обогатить наше воображение.

So thank you.

Спасибо.

(Applause)

(Аплодисменты)