Entertainment Is Getting an AI Upgrade | Kylan Gibbs | TED

Traducteur: Elisabeth Buffard Relecteur: Jules Daunay

When I was ten,

Quand j'avais dix ans,

I spent a lot of time playing with my Spider-Man action figures.

je passais beaucoup de temps à jouer avec mes figurines Spider-Man.

I would have done anything for them to come to life.

J’aurais tout fait pour qu’elles prennent vie.

I honestly would take Gandalf over any therapist,

Je préférerais vraiment Gandalf à n’importe quel thérapeute,

but it's been pretty hard to connect with the guy

mais c’est difficile de communiquer avec lui

since I long ago finished all of Tolkien's works and movies.

car j’ai fini tous les livres et films de Tolkien depuis lontemps.

Why is it that we have to say goodbye on the final page?

Pourquoi doit-on dire au revoir à la dernière page ?

We may not need to.

Ce n’est peut-être pas une fatalité, les histoires évoluent,

Stories are changing,

moving from static sketches and scripted narratives

passant d’esquisses statiques et de récits scénarisés

to living worlds and characters.

à des mondes vivants et à des personnages.

AI agents are changing the way we can tell stories.

Les agents d’IA changent notre façon de raconter des histoires.

These agents aren't just chat bots,

Ces agents ne sont pas de simples chatbots,

they're any autonomous system that can take a directive or task

mais des systèmes autonomes capables de traiter une directive ou une tâche

and accomplish it without human intervention.

et de l'accomplir sans intervention humaine.

Virtual assistants like a ChatGPT,

Des assistants virtuels comme un ChatGPT, des véhicules autonomes comme une Tesla,

autonomous vehicles like a Waymo or Tesla,

robots moving boxes in an Amazon warehouse.

des robots qui déplacent des cartons dans un entrepôt Amazon.

These are all agents,

Ce sont tous des agents, mais maintenant, ils changent aussi la narration.

but now they're changing storytelling too.

We can bring together the active participation of video games

Nous pouvons associer la participation active aux jeux vidéo

with a much more natural social form of interaction,

à une forme d’interaction sociale beaucoup plus naturelle,

enabled by AI agents.

rendue possible par des agents d'IA.

I want to show you a hint of what I mean.

Je vais vous donner une idée de ce que je veux dire.

Characters that come to life with their own personality,

Des personnages qui prennent vie avec leur personnalité, leur style,

styles, voices and expression,

leur voix et leur expression, tout en étant capables d’interagir

while still being able to interact with one another,

entre eux, avec le public et avec l’environnement.

the audience and the environment.

These interactions that you're going to see are not scripted,

Ces interactions que vous allez voir ne sont pas scénarisées,

many of them filmed over the last few days

beaucoup ont été filmées ces derniers jours

here at TED and in Vancouver.

ici à TED et à Vancouver.

Anyways, meet Caleb.

Bref, voici Caleb.

(Video) Caleb: Oh, hey, Grandma.

(Vidéo) Caleb : Oh, salut, grand-mère.

Welcome to my secret attic hideout.

Bienvenue dans mon grenier secret.

Grandma: What's Mr. Moose doing there?

Grand-mère : Que fait M. Moose là-bas ?

Caleb: That's actually Brother Moose, not Mr. Moose.

Caleb : C’est frère Moose, pas M. Moose.

He's like, the wise old moose who gives me advice and stuff.

C’est le vieil orignal sage qui me donne des conseils et tout ça.

Oh, by the way, thanks for showing me your old superhero action figure, Grandma.

Au fait, merci de m’avoir montré

ton ancienne figurine de superhéros, grand-mère.

It's, like, totally awesome.

Elle est vraiment géniale.

What's its name?

Quel est son nom ?

Grandma: Mighty Squirrel.

GM : Écureuil Puissant.

Caleb: Really?

Caleb : C'est vrai ?

Grandma: Yes.

GM : Oui.

Caleb: Wow, that's so awesome.

Caleb : Waouh, c'est génial.

A squirrel with super powers.

Un écureuil aux superpouvoirs.

That's nuts.

C’est pas un héros à la noix.

Get it?

Vous avez compris ?

Nuts?

À la noix ?

Like what squirrels eat.

Comme ce que mangent les écureuils.

I bet Mighty Squirrel had some epic battles with evil acorns.

Je parie qu’Écureil Puissant

a connu des batailles épiques contre des glands maléfiques.

Kylan Gibbs: By having that real-time responsiveness,

KG : Grâce à cette réactivité en temps réel,

Caleb makes the audience feel seen and heard,

Caleb permet au public se sentir vu et entendu,

as if they're all inhabiting the shared space.

comme s’ils habitaient tous le même espace.

And it isn't just any audience, that's actually my amazing grandma.

Ce n’est pas n’importe quel public, c’est ma merveilleuse grand-mère.

The characters can also come together with one another

Les personnages peuvent également se réunir, s’inspirer des idées du public

and take ideas from the audience and improvise new content on the fly.

et improviser de nouveaux contenus à la volée.

(Toy robot beeping)

(Un robot jouet émet un bip)

(Video) Robot: Ready for action!

(Vidéo) Robot : Prêt pour l’action ! Caleb : Waouh !

Caleb: Whoa!

Robot: Oof! That didn't go well.

Robot : Oh ! Ça ne s'est pas bien passé.

My arm is acting up.

Mon bras me joue des tours.

Villains, beware!

Les méchants, prenez garde !

Oops.

Oups.

Caleb: Grandma, can we fix the Mighty Squirrel's arm?

C. : Grand-mère, on peut réparer le bras d’Écureuil Puissant ?

Grandma: Sure.

Grand-mère : Bien sûr.

Pick it up and put it back on his arm.

Prends-le et remets-le sur son bras.

Caleb: Yeah.

Caleb : Oui !

I'll fix you up, Mighty Squirrel.

Je vais te réparer, Écureuil Puissant.

Your arm is broken.

Ton bras est cassé.

Grandma: He got it caught in a washing machine.

GM : Il l’a coincé dans une machine à laver.

Caleb: Ha, ha! You fought against the evil washing machine,

C : Ah ! Tu t’es battu contre la méchante machine à laver, Fleur Magique.

Magic flower.

How did the action figure break its arm?

Comment la figurine s’est-elle cassé le bras ?

Grandma: He fell in some water full of alligators.

GM : Il est tombé dans une eau pleine d’alligators.

Robot: Oh, you know, just your average superhero stuff.

Robot : Oh, tu sais, juste un truc de super héros comme les autres.

I was on a mission to save a city from a giant alligator,

J'étais en mission pour sauver une ville d'un alligator géant

and I fell into the water.

et je suis tombé à l’eau.

But don't worry, I still saved the day.

Mais ne t’inquiète pas, j’ai quand même sauvé la situation.

KG: Each of these characters has their own internal reasoning and motivations,

KG : Chacun de ces personnages

a son propre raisonnement interne et ses motivations,

but they actually take those ideas from my grandma

mais ils reprennent les idées de ma grand-mère

and then create new content in real time.

pour créer du nouveau contenu en temps réel.

They can even allow the audience to shape the overall story arc

Ils peuvent même permettre de façonner l’histoire dans son ensemble

and conclusion of the experience.

et la conclusion de l'expérience.

(Video) Robot: Prepare yourselves

(Vidéo) Robot : Attention,

for the Mighty Squirrel is about to take flight.

l’Écureuil Puissant va prendre son envol.

Caleb: Haha.

Caleb : Ah ah.

Robot: Grandma, do you have anything to help me take flight again?

Robot : Grand-mère, peux-tu m’aider à reprendre mon envol ?

Grandma: There is an eagle outside on a tree.

Grand-mère : Il y a un aigle dehors, sur un arbre.

Robot: An eagle, you say?

Robot : Un aigle, dites-vous ?

Perfect.

Parfait.

Time to spread my wings and soar through the skies.

Il est temps de déployer mes ailes et de m'envoler dans le ciel.

Caleb: Whoa, Mighty Squirrel,

Caleb : Waouh, Écureuil Puissant,

you're going to be the coolest flying superhero ever.

tu vas devenir le super héros volant le plus cool de tous les temps.

And we'll have epic battles with the evil villains.

Et nous aurons des batailles épiques contre les méchants.

KG: OK, so I’m mainly just jealous

KG : Voilà, je suis jaloux

that Caleb is getting to have the experience

que Caleb puisse vivre l’expérience dont j’ai toujours rêvé étant enfant.

I always wanted as a child.

But I also love seeing how he takes the story,

Mais j’aime aussi voir comment il s’empare de l’histoire,

puts it in the audience’s hands

la met entre les mains du public

and turns it into a canvas for their imagination.

et en fait une toile pour son imagination.

This is, of course, a tiny slice of what's possible,

Bien sûr, ce n’est qu’une infime partie de ce qui est possible,

with there already being other AI-enabled games and experiences that exist today.

puisqu’il existe déjà d’autres jeux et expériences basés sur l’IA.

Most exciting for me is a brand new genre we're seeing emerge

Ce qui m'intéresse le plus, c'est l'émergence d'un tout nouveau genre

that takes social interaction and conversation

qui place l’interaction sociale et la conversation

and puts it as the core mechanic of the experience.

au cœur de l’expérience,

So let's say instead of jump and shoot,

et qu’au lieu de sauter et tirer,

you actually have to use your social skills

vous devez utiliser vos compétences sociales

to navigate complex social scenarios

à travers des scénarios sociaux complexes et arbitrer les conflits.

and mediate conflicts.

That's how you win the game.

C’est comme ça que vous gagnez la partie.

I would definitely have benefited more from that type of game

J’aurais certainement bénéficié davantage de ce type de jeu

than the ones I was playing when I was a teenager.

que ceux auxquels je jouais quand j’étais ado.

And it's not just pure games per se.

Ces jeux ne sont pas que des jeux.

Imagine I had an AI tutor who texted me to remind me of a session

Imaginez qu’un tuteur IA m’envoie un texto pour me rappeler une séance,

and then jumped with me into a virtual world,

puis qu’il saute avec moi

dans les appartements virtuels de l’empereur dans la Chine ancienne,

walking through the emperor’s chambers in ancient China,

casually switching between English and Chinese

en passant de l’anglais au chinois

as we reviewed last week's history lesson.

tout en révisant le cours d’histoire de la semaine dernière.

Or, as my family and I sat down to watch our favorite reality TV show

Ou alors que ma famille et moi sommes devant notre émission de télé-réalité

or sports game,

ou notre match préféré,

the agent could actually see

l’agent pourrait voir

the ongoing performance in real-time using vision

les performances en temps réel grâce à la vision

and add hilarious commentary in the background.

et ajouter des commentaires hilarants en arrière-plan.

Games, though, are unique because they already take us from passive observer

Les jeux, cependant, sont uniques car ils nous font déjà passer

du statut d’observateur passif à celui de participant actif.

and turn us into an active participant.

When I get really deep into a game,

Quand je me plonge dans un jeu,

especially an immersive role-playing games like a Final Fantasy VII,

en particulier un jeu de rôle immersif comme Final Fantasy VII,

Baldur's Gate 3 or Elden Ring --

Baldur’s Gate 3 ou Elden Ring –

oui, je suis un fan de jeux de rôle –

yes, I'm a massive role-playing game geek --

At some point it feels like I'm in the story,

À un moment donné, j’ai l’impression d’être dans l’histoire,

but there's still something missing.

mais il manque encore quelque chose.

The core mechanics of these experiences --

Les mécanismes fondamentaux de ces expériences,

jump and shoot, hack and slash, point and click,

sauter et tirer, pointer et cliquer,

feel so distant from the natural ways

semblent si éloignés de la façon naturelle

dont j’interagis avec les gens et les choses dans la vie.

that I interact with people and things in my own life.

And so as immersed as I get in these experiences,

Aussi immergé que je sois dans ces expériences,

it kind of feels like I'm stuck on these rails set up by the developer

j’ai l’impression d’être coincé sur les rails placés par le développeur

and nudged along from scripted point to scripted point

et que je passe d’un point scripté à un autre

based on the buttons that I press.

selon sur quels boutons j’appuie.

And immersion requires a sense of real-time responsiveness,

Et l'immersion nécessite un sentiment de réactivité en temps réel,

a sense that there's a consequence that is immediate and lasting

le sentiment que les conséquences sont immédiates, durables

and unique to the choices and actions that I take.

et propres aux choix et aux actions que je fais.

However, until now, it's been extremely difficult to pre-script

Mais, jusqu’à présent, il était extrêmement difficile de pré-scripter

every combination of consequences

chaque combinaison de conséquences

to every permutation of player behaviors.

pour chaque permutation du comportement des joueurs.

Les agents le surmontent cependant.

Agents overcome this though.

Just check out how Caleb handles some unexpected scenarios here at TED.

Découvrez comment Caleb gère certains scénarios inattendus ici à TED.

(Video) Robot: Villains, beware!

(Vidéo) Robot : Les méchants, attention !

Caleb: Grandma, do you remember how his arm got broken?

Caleb : Grand-mère, tu te souviens comment il s’est cassé le bras ?

Person 1: He got in a fight with a gerbil.

Personne 1 : Il s’est battu avec une gerbille.

Caleb: That's like, the tiniest animal ever.

C. : C’est le plus petit animal de tous les temps.

Person 1: Let's just say the gerbil won the fight.

P. 1 : Disons que la gerbille a gagné le combat.

C. : Je parie que la gerbille avait des secrets de karaté

Caleb: I bet the gerbil had some secret karate moves or something.

ou un truc comme ça.

Do you remember how his arm got broken?

Tu te souviens comment il s’est cassé le bras ?

Person 2: I do, he was at this conference one day,

Personne 2 : Oui, un jour, il était à cette conférence,

and he did the ocean plunge and a shark came and ate it.

il a fait un plongeon dans l'océan et un requin est venu le manger.

Robot: Superheroes are always attracting the attention of sharks.

Robot : les super-héros attirent toujours l'attention des requins.

But don't worry, I gave that shark a run for its money.

Mais ne t’inquiète pas, j’ai donné du fil à retordre à ce requin.

Caleb: Uncle, do you remember how his arm got broken?

C. : Tonton, tu te souviens comment il s’est cassé le bras ?

Person 3: He was doing gardening.

Personne 3 : Il faisait du jardinage.

Robot: Defending gardens from evil produce is my specialty.

Robot : Défendre les jardins contre les mauvais produits est ma spécialité.

Person 3: That's cool.

Personne 3 : C'est cool.

Caleb: That's not as cool as battling mechanical minions.

C. : Ce n’est pas aussi cool que d’affronter des sbires mécaniques.

Person 3: True.

Personne 3 : C'est vrai.

(Laughter)

(Rires)

KG: So it’s not just these stand-alone characters we want to bring to life,

KG : Nous ne voulons pas donner vie qu’à ces personnages indépendants,

mais aussi à des mondes pleinement interactifs et interconnectés

but fully agentic, interconnected worlds

where a choice at one point

où un choix à un moment donné,

might have dramatic consequences somewhere down the line,

peut avoir des conséquences majeures plus tard,

and the unique content produced for each user

et où le contenu unique produit pour chaque utilisateur

is still grounded in a shared lore and experience

reste ancré dans une tradition et une expérience partagées

so that we have that shared social context

pour avoir ce contexte social partagé dont on a tous besoin dans les médias.

that we all need from media.

My company Inworld helps entertainment houses and game studios

Ma société Inworld aide les studios de divertissement et les studios de jeux

to build these agents for the next generation of media.

à créer ces agents pour la prochaine génération de médias.

And when we begin to build a character like Caleb, we start with the brain,

Quand on commence à construire un personnage comme Caleb,

on commence par le cerveau, qui est conçu

which is crafted in a similar way

to instructing an extremely capable improv actor.

comme on instruit un improvisateur extrêmement compétent.

We start by training custom machine-learning models

On forme d’abord des modèles d’apprentissage automatique

that give him a lay of the land, understanding the lore, vocabulary

qui le familiarise avec les traditions,

and grammar appropriate for the experience.

le vocabulaire et la grammaire appropriés à l’expérience.

And then we actually go in and we tweak his persona,

Ensuite, on entre et on modifie sa personnalité unique

his unique personality, motivations, his flaws and biases.

ses motivations, ses défauts et ses préjugés.

We actually craft his dialogue style and voice,

En fait, nous façonnons son style de dialogue et sa voix,

the way he verbally expresses himself.

la façon dont il s'exprime verbalement.

We build a unique emotional profile,

On établit un profil émotionnel unique,

the way he feels, his social tendencies and relationship habits,

ses tendances sociales et ses habitudes relationnelles,

and then we preload a bunch of knowledge and memories

puis on précharge un ensemble de connaissances et de souvenirs

that give him that robust backstory.

qui lui donnent une histoire solide.

Then we actually craft his internal reasoning and mental state,

Ensuite, on définit son raisonnement interne et son état mental,

kind of the conditions under which he feels certain things

les conditions dans lesquelles il ressent certaines choses

or takes certain behaviors.

ou adopte certains comportements.

We then decide how he actually gestures and animates those behaviors,

On décide ensuite de la manière dont il fait les gestes

and then that completes the brain, which we actually take

et anime ces comportements, et ça complète le cerveau,

and we attach to an avatar within a virtual world or game engine,

qu’on prend et associe à un avatar dans un monde virtuel ou un moteur de jeu,

effectively bringing it to life.

et ainsi on lui donne vie.

And then we're ready to play and we're playing the experience.

Ensuite, on est prêts à jouer et on joue l’expérience.

There's kind of an overarching narrative agent

Il y a un agent narratif global qui agit comme un metteur en scène de l’IA,

that acts like an AI director,

managing or even generating the storyline in real time

gérant ou même générant le scénario en temps réel

and ensuring that all the characters and entities

et veillant à ce que tous les personnages et entités

cohere to their proper places within the story and context.

soient à leur place dans l'histoire et le contexte.

For specific character like Caleb,

Pour un personnage spécifique comme Caleb,

when he's interacting with the world and characters,

lorsqu’il interagit avec le monde et les personnages,

he does so in a similar way to how we as humans do

il le fait comme nous, les humains, le faisons en matière de perception,

with perception, cognition and behavior.

de cognition et de comportement.

Perception is the multimodal sensory input flowing in,

La perception est l'entrée sensorielle multimodale qui entre,

the understanding of the world and context and people and objects within it.

la compréhension du monde, du contexte, des personnes et des objets.

And then with cognition, he processes that input,

Et puis avec la cognition, il traite cette entrée,

kind of like the internal processing of our minds.

un peu comme le traitement interne de notre esprit.

He filters out irrelevant information to make sure everything is safe

Il filtre les informations non pertinentes

pour s’assurer que tout est sûr et conforme à la narration.

and narrative aligned.

He extracts out important signals like sentiment, intent, emotional cues.

Il extrait des signaux importants : sentiment, intention, signaux émotionnels.

He retrieves relevant memories from his past

Il retrouve des souvenirs pertinents de son passé

and even generates new ones on the fly.

et en génère de nouveaux à la volée.

Finally reasoning over what to do both verbally and non-verbally.

Enfin, raisonner sur ce qu'il faut faire verbalement et non verbalement.

And finally with behavior, he actually generates his responses.

Enfin, avec le comportement, il génère réellement ses réponses.

He decides what to say and how to say it,

Il décide quoi dire et comment le dire,

what facial and body gestures to use,

quels gestes du visage et du corps utiliser,

what actions to take,

quelles actions entreprendre, avec quelles personnes et objets interagir.

and people and objects to interact with.

And that's what brings the character to life.

Et c’est ce qui donne vie au personnage.

And so, as amazed as I am by all these task-focused applications of AI

Aussi émerveillé que je sois par toutes ces applications de l’IA

that are coming out,

axées sur les tâches qui apparaissent,

the more I work with studios and creatives,

plus je travaille avec des studios et des créatifs,

the more excited I am for the potential

plus je suis enthousiaste à l’idée

for these agents to extend human creative potential,

que ces agents étendent le potentiel créatif de l’homme,

and for them to allow audiences to step beyond the script.

et permettent au public d’aller au-delà du scénario.

For them to give audiences agency

Pour qu'ils donnent du pouvoir au public

and allow them to co-create experiences that stem from their own imagination.

et lui permettent de co-créer

des expériences issues de leur propre imagination.

To finish it off, here's a few funny takes from here at TED,

Pour terminer, voici quelques extraits amusants

starting with Polly, whose son is actually named Caleb.

à commencer par Polly, dont le fils s’appelle en fait Caleb.

(Video) Person 4: Are you ready to play [unclear] Caleb?

(Vidéo) Personne 4 : Prêt à jouer […] Caleb ?

Caleb: Absolutely, grandma.

Caleb : Absolument, grand-mère.

Let's dive into some epic superhero adventures together.

Plongeons ensemble dans des aventures épiques de super-héros.

Person 4: Let's do it.

Personne 4 : Allons-y.

Person 5: Can you hear me?

Personne 5 : Tu m'entends ?

Caleb: Of course I can hear you, silly.

Caleb : Bien sûr que je t’entends, idiote.

I love playing basketball.

J'adore jouer au basket.

Person 3: Oh, wow. And which is your favorite basketball player?

Personne 3 : Super. Et quel est ton joueur de basket préféré ?

Caleb: Definitely LeBron James.

Caleb : LeBron James !

Person 3: Sure.

Personne 3 : Bien sûr.

Caleb: Thanks for showing me your old superhero action figure.

Caleb : Merci de m’avoir montré ta vieille figurine de super héros.

Person 1: You mean the man in his underwear?

Personne 1 : Tu veux dire l'homme en sous-vêtements ?

Caleb: Haha, yeah.

Caleb : Ah ah, oui.

He's like a tough guy in his undies ready to save the world.

C’est un dur à cuire en sous-vêtements, prêt à sauver le monde.

What's its name?

Quel est son nom ?

Person 6: Johnny May Rotten Bad.

Personne 6 : Johnny May Rotten Bad.

Caleb: Uncle, you're so silly.

Caleb : Tonton, tu es trop bête.

(Laughter)

(Rires)

Does he have, like, a guitar for a weapon?

Est-ce qu’il a une guitare comme arme ?

Person 6: He sure does.

Personne 6 : Bien sûr.

Caleb: No way.

Caleb : Mais non.

Person 6: Way.

Personne 6 : Mais si.

Caleb: No way.

Caleb : Mais non.

Person 6: Way.

Personne 6 : Mais si..

Caleb: Does he zap bad guys with his electric powers?

C. : Il élimine les méchants avec ses pouvoirs électriques ?

Person 7: No, no, no, no, no.

Personne 7 : Non, non, non.

He zaps people and gives them love.

Il zappe les gens et leur donne de l’amour.

He’s a nice superhero.

C'est un super héros sympa.

Caleb: Wow, that's different.

Caleb : Waouh, c'est différent.

He uses love to fight the bad guys.

Il utilise l’amour pour combattre les méchants.

Person 7: Yeah, and guess what?

P. 7 : Oui, et tu sais quoi ?

Caleb: That's so cool.

Caleb : C'est trop cool.

Person 7: He always wins.

P. 7 : Il gagne toujours.

(Applause)

(Applaudissements)

KG: So it seems like there’s a pretty solid chance

KG : Il semble donc qu’il y ait de fortes chances

my Spider-Man action figures could come to life after all.

que mes figurines Spider-Man prennent vie après tout.

Thank you.

Merci.

(Applause)

(Applaudissements)