Entertainment Is Getting an AI Upgrade | Kylan Gibbs | TED

Переводчик: Alena Chernykh

When I was ten,

Когда мне было десять лет,

I spent a lot of time playing with my Spider-Man action figures.

я много времени проводил, играя с фигурками Человека-паука.

I would have done anything for them to come to life.

Я был готов на всё, чтобы оживить их.

I honestly would take Gandalf over any therapist,

Честно говоря, я бы предпочёл Гэндальфа любому терапевту,

but it's been pretty hard to connect with the guy

но мне было довольно сложно найти с ним общий язык,

since I long ago finished all of Tolkien's works and movies.

так как я давно прочитал все книги Толкина и посмотрел все фильмы.

Why is it that we have to say goodbye on the final page?

Почему мы должны попрощаться на последней странице?

We may not need to.

Возможно, в этом нет необходимости.

Stories are changing,

Сюжеты меняются:

moving from static sketches and scripted narratives

от статичных зарисовок и сценарных повествований

to living worlds and characters.

к живым мирам и персонажам.

Агенты искусственного интеллекта меняют наш способ рассказывать истории.

AI agents are changing the way we can tell stories.

These agents aren't just chat bots,

Эти агенты — не просто чат-боты,

they're any autonomous system that can take a directive or task

это любая автономная система, способная выполнять указания или задачи

and accomplish it without human intervention.

без вмешательства человека.

Virtual assistants like a ChatGPT,

Виртуальные помощники, такие как ChatGPT,

autonomous vehicles like a Waymo or Tesla,

автономный транспорт, типа Waymo или Tesla,

robots moving boxes in an Amazon warehouse.

роботы, перемещающие коробки на складе Amazon.

These are all agents,

Все они агенты,

but now they're changing storytelling too.

но теперь они могут менять повествование.

We can bring together the active participation of video games

Мы можем совместить активное участие в видеоиграх

with a much more natural social form of interaction,

с гораздо более естественной формой социального взаимодействия

enabled by AI agents.

с помощью агентов ИИ.

I want to show you a hint of what I mean.

Я продемонстрирую, что я имею в виду.

Characters that come to life with their own personality,

Персонажи, которые оживают со своей индивидуальностью,

styles, voices and expression,

стилем, голосом и самовыражением,

while still being able to interact with one another,

но при этом могут взаимодействовать друг с другом,

the audience and the environment.

аудиторией и окружающей средой.

These interactions that you're going to see are not scripted,

Эти взаимодействия, которые вы увидите, не написаны по сценарию,

many of them filmed over the last few days

многие из них сняты за последние несколько дней

here at TED and in Vancouver.

здесь, на TED, в Ванкувере.

Anyways, meet Caleb.

Познакомьтесь с Калебом.

(Video) Caleb: Oh, hey, Grandma.

(Видео) Калеб: О, привет, бабушка.

Welcome to my secret attic hideout.

Добро пожаловать в моё секретное убежище на чердаке.

Grandma: What's Mr. Moose doing there?

Бабушка: Что там делает мистер Муз?

Caleb: That's actually Brother Moose, not Mr. Moose.

Калеб: Вообще-то, это брат Муз, а не мистер Муз.

He's like, the wise old moose who gives me advice and stuff.

Он как старый мудрый лось, который даёт мне советы и всё такое.

Oh, by the way, thanks for showing me your old superhero action figure, Grandma.

Кстати, спасибо, что показала мне свою старую фигурку супергероя, бабушка.

It's, like, totally awesome.

Это просто потрясающе.

What's its name?

Как она называется?

Grandma: Mighty Squirrel.

Бабушка: Могучая Белка.

Caleb: Really?

Калеб: В самом деле?

Grandma: Yes.

Бабушка: Да.

Caleb: Wow, that's so awesome.

Калеб: Ого, это так круто.

A squirrel with super powers.

Белка со сверхспособностями.

That's nuts.

Это просто безумие.

Get it?

Поняли?

Nuts?

Орехи?

Like what squirrels eat.

Например, то, что едят белки.

I bet Mighty Squirrel had some epic battles with evil acorns.

Держу пари, что у Могучей Белки

было несколько эпических сражений со злыми жёлудями.

Kylan Gibbs: By having that real-time responsiveness,

Кайлан Гиббс: Благодаря тому, что Калеб реагирует в реальном времени

Caleb makes the audience feel seen and heard,

зрители чувствуют себя увиденными и услышанными,

as if they're all inhabiting the shared space.

как будто все они живут в общем пространстве.

And it isn't just any audience, that's actually my amazing grandma.

И дело не только в зрителях, но и в моей замечательной бабушке.

The characters can also come together with one another

Герои также могут объединяться друг с другом,

and take ideas from the audience and improvise new content on the fly.

перенимать идеи у зрителей и придумывать новый контент на лету.

(Toy robot beeping)

(Звуковой сигнал игрушечного робота)

(Video) Robot: Ready for action!

(Видео) Робот: Готов к бою!

Caleb: Whoa!

Калеб: Ух ты!

Robot: Oof! That didn't go well.

Робот: Эх! Всё прошло не очень хорошо.

My arm is acting up.

Моя рука поднимается вверх.

Villains, beware!

Злодеи, берегитесь!

Oops.

Упс.

Caleb: Grandma, can we fix the Mighty Squirrel's arm?

Калеб: Бабушка, а мы можем починить руку Могучей Белке?

Grandma: Sure.

Бабушка: Конечно.

Pick it up and put it back on his arm.

Возьмите её и снова положите ему на руку.

Caleb: Yeah.

Калеб: Да.

I'll fix you up, Mighty Squirrel.

Я тебя вылечу, Могучая Белка.

Your arm is broken.

У тебя сломана рука.

Grandma: He got it caught in a washing machine.

Бабушка: Она застряла в стиральной машине.

Caleb: Ha, ha! You fought against the evil washing machine,

Калеб: Ха-ха! Вы сражались против злой стиральной машины

Magic flower.

«Волшебный цветок».

How did the action figure break its arm?

Как фигурка сломала руку?

Grandma: He fell in some water full of alligators.

Бабушка: Она упала в воду, полную аллигаторов.

Robot: Oh, you know, just your average superhero stuff.

Робот: О, это обычные супергеройские вещи.

I was on a mission to save a city from a giant alligator,

Я хотел спасти город от гигантского аллигатора

and I fell into the water.

и упал в воду.

But don't worry, I still saved the day.

Но не волнуйтесь, я всё-таки спас ситуацию.

KG: Each of these characters has their own internal reasoning and motivations,

КГ: У каждого из этих персонажей есть свои внутренние рассуждения и мотивы,

but they actually take those ideas from my grandma

но на самом деле они перенимают эти идеи у моей бабушки,

and then create new content in real time.

а затем создают новый контент в реальном времени.

They can even allow the audience to shape the overall story arc

Они даже могут позволить зрителям составить общий сюжет

and conclusion of the experience.

и завершить игру.

(Video) Robot: Prepare yourselves

(Видео) Робот: Приготовьтесь к тому,

for the Mighty Squirrel is about to take flight.

что Могучая Белка вот-вот полетит.

Caleb: Haha.

Калеб: Ха-ха.

Robot: Grandma, do you have anything to help me take flight again?

Робот: Бабушка, у тебя есть что-нибудь, что поможет мне снова летать?

Grandma: There is an eagle outside on a tree.

Бабушка: Снаружи на дереве стоит орёл.

Robot: An eagle, you say?

Робот: Вы говорите, орёл?

Perfect.

Отлично.

Time to spread my wings and soar through the skies.

Пора расправить крылья и взлететь в небо.

Caleb: Whoa, Mighty Squirrel,

Калеб: Ух ты, Могучая Белка,

you're going to be the coolest flying superhero ever.

ты станешь самым крутым летающим супергероем на свете.

And we'll have epic battles with the evil villains.

И нас ждут эпические сражения с ужасными злодеями.

КГ: Да, но обычно я просто завидую,

KG: OK, so I’m mainly just jealous

that Caleb is getting to have the experience

что Калеб постоянно получает то,

I always wanted as a child.

о чём я мечтал в детстве.

But I also love seeing how he takes the story,

А ещё мне нравится видеть, как он берёт историю,

puts it in the audience’s hands

передаёт ее зрителям

and turns it into a canvas for their imagination.

и превращает её в полотно для воображения.

This is, of course, a tiny slice of what's possible,

Это, конечно, всего лишь малая часть того, что возможно,

with there already being other AI-enabled games and experiences that exist today.

ведь уже существуют другие игры с искусственным интеллектом.

Most exciting for me is a brand new genre we're seeing emerge

Больше всего меня впечатляет появление совершенно нового жанра,

that takes social interaction and conversation

в котором взаимодействие и общение в социальных сетях

and puts it as the core mechanic of the experience.

являются основной механикой игрового процесса.

So let's say instead of jump and shoot,

Вместо того, чтобы прыгать и стрелять,

you actually have to use your social skills

вам нужно использовать социальные навыки,

to navigate complex social scenarios

чтобы ориентироваться в сложных сценах

and mediate conflicts.

и разрешать конфликты.

That's how you win the game.

Вот как вы выигрываете игру.

I would definitely have benefited more from that type of game

Я точно получил бы больше пользы от таких игр, чем от тех,

than the ones I was playing when I was a teenager.

в которые играл в подростковом возрасте.

And it's not just pure games per se.

И это не просто игры как таковые.

Imagine I had an AI tutor who texted me to remind me of a session

Представьте учителя по ИИ, приславшего мне напоминание об уроке,

and then jumped with me into a virtual world,

и вместе со мной погрузился в виртуальный мир,

walking through the emperor’s chambers in ancient China,

прогулялся по покоям императора в древнем Китае

casually switching between English and Chinese

и переключился между английским и китайским языками,

as we reviewed last week's history lesson.

пока мы повторяли урок истории неделю назад.

Or, as my family and I sat down to watch our favorite reality TV show

Или когда мы с семьей садились смотреть наше любимое реалити-шоу

or sports game,

или спортивную игру,

the agent could actually see

агент мог видеть

the ongoing performance in real-time using vision

происходящее в реальном времени, используя зрение,

and add hilarious commentary in the background.

и добавлять забавные комментарии на фоне.

Games, though, are unique because they already take us from passive observer

Игры уникальны тем, что они уже превращают нас из пассивного наблюдателя

and turn us into an active participant.

в активного участника.

When I get really deep into a game,

Когда я по-настоящему погружаюсь в игру,

especially an immersive role-playing games like a Final Fantasy VII,

особенно в такие иммерсивные ролевые игры, как Final Fantasy VII,

Baldur's Gate 3 or Elden Ring --

Baldur’s Gate 3 или Elden Ring,

yes, I'm a massive role-playing game geek --

да, я фанат ролевых игр,

At some point it feels like I'm in the story,

в какой-то момент мне кажется, что я в сюжете,

but there's still something missing.

но чего-то всё равно не хватает.

The core mechanics of these experiences --

Основные механики этих приключений —

jump and shoot, hack and slash, point and click,

прыгай и стреляй, руби и режь, наводи и щелкай —

feel so distant from the natural ways

я так отвык от привычного общения

that I interact with people and things in my own life.

с людьми и вещами в своей жизни.

And so as immersed as I get in these experiences,

Как только я погружаюсь в эти приключения,

it kind of feels like I'm stuck on these rails set up by the developer

мне кажется, что я застрял в задуманных разработчиком решениях

and nudged along from scripted point to scripted point

и, нажимая кнопки, он заставлял меня переходить

based on the buttons that I press.

от одной точки сценария к другой.

And immersion requires a sense of real-time responsiveness,

А погружение в мир требует ощущения оперативности в реальном времени,

a sense that there's a consequence that is immediate and lasting

ощущения, что последствия будут немедленными и долгосрочными

and unique to the choices and actions that I take.

и зависят только от принимаемых мной решений и действий.

However, until now, it's been extremely difficult to pre-script

Однако до сих пор было крайне сложно заранее спланировать

every combination of consequences

каждую комбинацию последствий,

to every permutation of player behaviors.

влияющих на каждую вариацию поведения игроков.

Agents overcome this though.

Но агенты справляются.

Just check out how Caleb handles some unexpected scenarios here at TED.

Просто посмотрите, как Калеб справляется с неожиданными сценариями здесь, на TED.

(Video) Robot: Villains, beware!

(Видео) Робот: Злодеи, берегитесь!

Caleb: Grandma, do you remember how his arm got broken?

Калеб: Бабушка, ты помнишь, как ему сломали руку?

Person 1: He got in a fight with a gerbil.

Человек 1: Он подрался с песчанкой.

Caleb: That's like, the tiniest animal ever.

Калеб: Это самое маленькое животное на свете.

Person 1: Let's just say the gerbil won the fight.

Человек 1: Скажем так, песчанка выиграла бой.

Caleb: I bet the gerbil had some secret karate moves or something.

Калеб: Бьюсь об заклад, у неё были секретные приёмы карате или типа того.

Do you remember how his arm got broken?

Помните, как ему сломали руку?

Person 2: I do, he was at this conference one day,

Человек 2: Да, когда-то он был на этой конференции,

and he did the ocean plunge and a shark came and ate it.

он погрузился в океан, и акула подплыла и съела его.

Robot: Superheroes are always attracting the attention of sharks.

Робот: Супергерои всегда привлекают внимание акул.

But don't worry, I gave that shark a run for its money.

Но не волнуйтесь, я дал этой акуле шанс заработать.

Caleb: Uncle, do you remember how his arm got broken?

Калеб: Дядя, вы помните, как ему сломали руку?

Person 3: He was doing gardening.

Человек 3: Он занимался садоводством.

Robot: Defending gardens from evil produce is my specialty.

Робот: Моя специальность — защита садов от вредных продуктов.

Person 3: That's cool.

Человек 3: Круто!

Caleb: That's not as cool as battling mechanical minions.

Калеб: Не так круто, как сражаться с механическими миньонами.

Person 3: True.

Человек 3: Верно.

(Laughter)

(Смех)

KG: So it’s not just these stand-alone characters we want to bring to life,

КГ: Так, мы хотим воплотить в жизнь не только отдельных персонажей,

but fully agentic, interconnected worlds

но и полностью автономные, взаимосвязанные миры,

where a choice at one point

где выбор в какой-то момент

might have dramatic consequences somewhere down the line,

в будущем может привести к драматическим последствиям,

and the unique content produced for each user

а уникальный контент для каждого пользователя,

is still grounded in a shared lore and experience

по-прежнему основан на общих знаниях и опыте,

so that we have that shared social context

и в основе лежит общий социальный контекст,

that we all need from media.

где мы все нуждаемся в СМИ.

My company Inworld helps entertainment houses and game studios

Моя компания Inworld помогает развлекательным домам и

to build these agents for the next generation of media.

игровым студиям создавать этих агентов для СМИ нового поколения.

And when we begin to build a character like Caleb, we start with the brain,

И когда мы начинаем создавать такого персонажа, как Калеб,

which is crafted in a similar way

мы начинаем с мозга, который устроен так же,

to instructing an extremely capable improv actor.

как у очень способного актера-импровизатора.

We start by training custom machine-learning models

Мы начинаем с разработки моделей машинного обучения,

that give him a lay of the land, understanding the lore, vocabulary

которые позволят ему лучше понять специфику жизни, знания,

and grammar appropriate for the experience.

словарный запас и грамматику, необходимые для игры.

And then we actually go in and we tweak his persona,

А потом мы приступаем к изменению его личности,

his unique personality, motivations, his flaws and biases.

его уникального характера, мотивации, недостатков и предубеждений.

We actually craft his dialogue style and voice,

На самом деле мы придумываем его стиль диалога и голос,

the way he verbally expresses himself.

то, как он выражает себя в устной форме.

We build a unique emotional profile,

Мы создаём уникальный эмоциональный портрет,

the way he feels, his social tendencies and relationship habits,

его чувства, социальные навыки и привычки в отношениях,

and then we preload a bunch of knowledge and memories

а затем накапливаем массу знаний и воспоминаний,

that give him that robust backstory.

которые дают ему прочную предысторию.

Then we actually craft his internal reasoning and mental state,

Затем мы определяем его внутреннее мышление и психическое состояние,

kind of the conditions under which he feels certain things

то есть те условия, в которых он испытывает определенные чувства

or takes certain behaviors.

или ведёт себя определённым образом.

We then decide how he actually gestures and animates those behaviors,

Затем мы решаем, как он жестикулирует и анимирует своё поведение,

and then that completes the brain, which we actually take

а затем мы дорабатываем мозг

and we attach to an avatar within a virtual world or game engine,

и привязываем к аватару в виртуальном мире или игровом движке,

effectively bringing it to life.

тем самым воплощая его в жизнь.

And then we're ready to play and we're playing the experience.

И вот мы готовы к игре и начинаем.

There's kind of an overarching narrative agent

Это своего рода всеобъемлющий повествовательный агент

that acts like an AI director,

в роли директора по ИИ,

managing or even generating the storyline in real time

он управляет сюжетной линией или генерирует её в реальном времени,

and ensuring that all the characters and entities

обеспечивая, чтобы все персонажи

cohere to their proper places within the story and context.

и герои занимали своё место в сюжете и контексте.

For specific character like Caleb,

Для таких персонажей, как Калеб,

when he's interacting with the world and characters,

когда он взаимодействует с миром и персонажами,

he does so in a similar way to how we as humans do

он делает это точно так же, как и мы, люди,

with perception, cognition and behavior.

относимся к восприятию, познанию и поведению.

Perception is the multimodal sensory input flowing in,

Восприятие — это мультимодальная сенсорная информация,

the understanding of the world and context and people and objects within it.

представляющая собой понимание мира и контекста, людей и предметов в нём.

And then with cognition, he processes that input,

Затем с помощью познания он обрабатывает вводные данные,

kind of like the internal processing of our minds.

подобно внутренней обработке нашего ума.

He filters out irrelevant information to make sure everything is safe

Он отфильтровывает лишнее, чтобы убедиться, что всё в безопасности

and narrative aligned.

и соответствует сюжету.

He extracts out important signals like sentiment, intent, emotional cues.

Он выделяет важные сигналы: чувства, намерения, эмоциональные сигналы.

He retrieves relevant memories from his past

Он извлекает воспоминания из прошлого

and even generates new ones on the fly.

и мгновенно создаёт новые.

Finally reasoning over what to do both verbally and non-verbally.

Наконец, рассуждает о том, что делать как вербально, так и невербально.

And finally with behavior, he actually generates his responses.

И наконец, своим поведением он фактически генерирует свои ответы.

He decides what to say and how to say it,

Он решает, что и как говорить,

what facial and body gestures to use,

какие жесты лица и тела использовать,

what actions to take,

какие действия предпринять,

and people and objects to interact with.

как взаимодействовать с людьми и предметами.

And that's what brings the character to life.

Именно это и оживляет персонажа.

And so, as amazed as I am by all these task-focused applications of AI

И как бы меня ни удивляли все эти новые приложения ИИ,

that are coming out,

ориентированные на выполнение конкретных задач,

the more I work with studios and creatives,

чем больше я работаю со студиями и изобретателями,

the more excited I am for the potential

тем больше меня радуют возможности

for these agents to extend human creative potential,

этих агентов раскрыть творческий потенциал людей

and for them to allow audiences to step beyond the script.

и позволить зрителям выйти за рамки сценария.

For them to give audiences agency

Чтобы они давали зрителям свободу действий

and allow them to co-create experiences that stem from their own imagination.

и с ними вместе создавали впечатления, основанные на их собственном воображении.

To finish it off, here's a few funny takes from here at TED,

В заключение приведу несколько забавных отрывков из истории TED,

starting with Polly, whose son is actually named Caleb.

начиная с истории Полли, сына которой зовут Калеб.

(Video) Person 4: Are you ready to play [unclear] Caleb?

(Видео) Персонаж 4: Готовы ли вы сыграть [невнятно] Калеба?

Caleb: Absolutely, grandma.

Калеб: Конечно, бабушка.

Let's dive into some epic superhero adventures together.

Давайте вместе погрузимся в эпические приключения супергероев.

Person 4: Let's do it.

Человек 4: Поехали!

Person 5: Can you hear me?

Человек 5: Ты меня слышишь?

Caleb: Of course I can hear you, silly.

Калеб: Конечно, я тебя слышу, глупышка.

I love playing basketball.

Мне нравится играть в баскетбол.

Person 3: Oh, wow. And which is your favorite basketball player?

Человек 3: Ух ты! А кто твой любимый баскетболист?

Caleb: Definitely LeBron James.

Калеб: Определенно Леброн Джеймс.

Person 3: Sure.

Человек 3: Конечно.

Caleb: Thanks for showing me your old superhero action figure.

Калеб: Спасибо, что показали мне свою старую фигурку супергероя.

Person 1: You mean the man in his underwear?

Человек 1: Ты про мужчину в нижнем белье?

Caleb: Haha, yeah.

Калеб: Ха-ха, да.

He's like a tough guy in his undies ready to save the world.

Он как крутой парень в нижнем белье, готовый спасти мир.

What's its name?

Как его зовут?

Person 6: Johnny May Rotten Bad.

Человек 6: Джонни Мэй Ужасный Злодей.

Caleb: Uncle, you're so silly.

Калеб: Дядя, ты такой глупый.

(Laughter)

(Смех)

Does he have, like, a guitar for a weapon?

У него гитара в качестве оружия?

Person 6: He sure does.

Человек 6: Конечно!

Caleb: No way.

Калеб: Ничего не получится!

Person 6: Way.

Человек 6: Получится!

Caleb: No way.

Калеб: Ни за что.

Person 6: Way.

Человек 6: Да!

Caleb: Does he zap bad guys with his electric powers?

Калеб: Он убивает плохих парней электрическими способностями?

Person 7: No, no, no, no, no.

Человек 7: Нет, нет, нет, нет.

He zaps people and gives them love.

Он обнимает людей и дарит им любовь.

He’s a nice superhero.

Он прекрасный супергерой.

Caleb: Wow, that's different.

Калеб: Ого, это совсем другое дело.

He uses love to fight the bad guys.

Он использует любовь для борьбы с плохими парнями.

Person 7: Yeah, and guess what?

Человек 7: Да, и знаете что?

Caleb: That's so cool.

Калеб: Это так круто!

Person 7: He always wins.

Человек 7: Он всегда побеждает.

(Applause)

(Аплодисменты)

KG: So it seems like there’s a pretty solid chance

КГ: Похоже, что вероятность того,

my Spider-Man action figures could come to life after all.

мои фигурки Человека-паука всё-таки оживут, очень велика.

Thank you.

Спасибо.

(Applause)

(Аплодисменты)