How we can teach computers to make sense of our emotions | Raphael Arar

Translator: Ivana Korom Reviewer: Joanna Pietrulewicz

Traducteur: Jules Daunay Relecteur: Elisabeth Buffard

I consider myself one part artist and one part designer.

Je me vois à moitié comme un artiste et à moitié comme un designer.

And I work at an artificial intelligence research lab.

Je travaille dans un laboratoire de recherche en intelligence artificielle.

We're trying to create technology

On essaie de créer la technologie

that you'll want to interact with in the far future.

avec laquelle vous voudrez interagir dans un futur lointain.

Not just six months from now, but try years and decades from now.

Pas seulement dans 6 mois, mais dans des années, des décennies.

And we're taking a moonshot

Ce sera un moment historique

that we'll want to be interacting with computers

quand on interagira avec les ordinateurs

in deeply emotional ways.

par l'intensité de nos émotions.

So in order to do that,

Pour y arriver,

the technology has to be just as much human as it is artificial.

la technologie doit être autant humaine qu'artificielle.

It has to get you.

Elle doit nous toucher.

You know, like that inside joke that'll have you and your best friend

Comme cette blague qu'on ne partage qu'avec son meilleur ami,

on the floor, cracking up.

en se tordant de rire, par terre.

Or that look of disappointment that you can just smell from miles away.

Ou cet air de déception qu'on peut sentir à des kilomètres.

I view art as the gateway to help us bridge this gap between human and machine:

Je vois l'art comme la passerelle

pour combler le fossé entre l'homme et la machine,

to figure out what it means to get each other

pour imaginer ce que signifie « se comprendre l'un l'autre »

so that we can train AI to get us.

pour entraîner l'IA à nous comprendre.

See, to me, art is a way to put tangible experiences

À mon sens, l'art est le moyen de mettre des expériences concrètes

to intangible ideas, feelings and emotions.

sur des idées abstraites, des sentiments et des émotions.

And I think it's one of the most human things about us.

Je pense que c'est la plus humaine des choses qui soit.

See, we're a complicated and complex bunch.

Nous sommes une espèce complexe.

We have what feels like an infinite range of emotions,

Nous ressentons une gamme infinie d'émotions et,

and to top it off, we're all different.

pour couronner le tout, nous sommes tous différents.

We have different family backgrounds,

Nos origines familiales sont différentes,

different experiences and different psychologies.

tout comme nos expériences et notre façon de penser.

And this is what makes life really interesting.

C'est ce qui rend nos vies vraiment intéressantes.

But this is also what makes working on intelligent technology

Mais c'est aussi ce qui rend le travail sur la technologie intelligente

extremely difficult.

extrêmement difficile.

And right now, AI research, well,

Actuellement, la recherche sur l'IA

it's a bit lopsided on the tech side.

favorise plutôt la dimension technique.

And that makes a lot of sense.

Ce qui s'explique très bien.

See, for every qualitative thing about us --

Chacune de nos caractéristiques qualitatives,

you know, those parts of us that are emotional, dynamic and subjective --

tout ce qui a trait à nos émotions, aux dynamiques internes et au subjectif,

we have to convert it to a quantitative metric:

doit être convertie en données quantitatives

something that can be represented with facts, figures and computer code.

pouvant être représentées par des faits, des chiffres et du code informatique.

The issue is, there are many qualitative things

Le problème, c'est qu'on a beaucoup de données qualitatives

that we just can't put our finger on.

tout simplement incompréhensibles.

So, think about hearing your favorite song for the first time.

La première fois que vous avez écouté votre chanson préférée,

What were you doing?

que faisiez-vous ?

How did you feel?

Qu'avez-vous ressenti ?

Did you get goosebumps?

Vous avez eu la chair de poule ?

Or did you get fired up?

Ou vous étiez à fond ?

Hard to describe, right?

Difficile à décrire, non ?

See, parts of us feel so simple,

Des parties de nous ont l'air si simples,

but under the surface, there's really a ton of complexity.

mais une complexité inouïe se cache sous la surface.

And translating that complexity to machines

Traduire cette complexité à des machines

is what makes them modern-day moonshots.

sera une des avancées majeures de notre temps.

And I'm not convinced that we can answer these deeper questions

Je ne suis pas sûr qu'on puisse répondre à ces questions existentielles

with just ones and zeros alone.

uniquement par du code binaire.

So, in the lab, I've been creating art

Au laboratoire, la création artistique

as a way to help me design better experiences

est ma façon de concevoir de meilleures expériences

for bleeding-edge technology.

pour les technologies de pointe.

And it's been serving as a catalyst

L'art me sert de catalyseur

to beef up the more human ways that computers can relate to us.

pour renforcer au maximum la dimension humaine comprise par les ordinateurs.

Through art, we're tacking some of the hardest questions,

À travers l'art, on aborde des questions très difficiles,

like what does it really mean to feel?

comme ce que veut vraiment dire « ressentir ».

Or how do we engage and know how to be present with each other?

Comment s'investir et savoir être là pour les autres.

And how does intuition affect the way that we interact?

Et comment l'intuition influence notre façon d'interagir.

So, take for example human emotion.

Prenons par exemple l'émotion humaine.

Right now, computers can make sense of our most basic ones,

Actuellement, les ordinateurs peuvent comprendre les plus basiques

like joy, sadness, anger, fear and disgust,

comme la joie, la tristesse, la colère, la peur et le dégoût,

by converting those characteristics to math.

en convertissant mathématiquement ces traits caractéristiques.

But what about the more complex emotions?

Mais qu'en est-il des émotions plus complexes ?

You know, those emotions

Ces émotions

that we have a hard time describing to each other?

qu'on a du mal à décrire à quelqu'un d'autre.

Like nostalgia.

Comme la nostalgie.

So, to explore this, I created a piece of art, an experience,

Pour l'étudier, j'ai créé une œuvre d'art, une expérience,

that asked people to share a memory,

qui demande aux gens de partager un souvenir.

and I teamed up with some data scientists

J'ai fait équipe avec des experts en mégadonnées

to figure out how to take an emotion that's so highly subjective

pour comprendre comment saisir une émotion aussi subjective

and convert it into something mathematically precise.

et la convertir en quelque chose de précis pour les mathématiques.

So, we created what we call a nostalgia score

On a donc créé une matrice de la nostalgie

and it's the heart of this installation.

et c'est le cœur de cette installation.

To do that, the installation asks you to share a story,

Pour ce faire, l'installation demande de raconter une histoire,

the computer then analyzes it for its simpler emotions,

l'ordinateur analyse ensuite les émotions les plus simples.

it checks for your tendency to use past-tense wording

Il vérifie la tendance à utiliser les verbes au passé

and also looks for words that we tend to associate with nostalgia,

et cherche les mots souvent associés à la nostalgie,

like "home," "childhood" and "the past."

comme « maison », « enfance » et « le passé ».

It then creates a nostalgia score

Puis une matrice de nostalgie est créée,

to indicate how nostalgic your story is.

indiquant le degré de nostalgie de l'histoire.

And that score is the driving force behind these light-based sculptures

La matrice agit sur ces sculptures lumineuses

that serve as physical embodiments of your contribution.

qui incarnent chaque contribution.

And the higher the score, the rosier the hue.

Plus le score est élevé, plus la lumière est rose.

You know, like looking at the world through rose-colored glasses.

C'est comme voir la vie en rose.

So, when you see your score

Quand on voit son score

and the physical representation of it,

et sa représentation artistique,

sometimes you'd agree and sometimes you wouldn't.

on est parfois d'accord, mais pas toujours.

It's as if it really understood how that experience made you feel.

C'est comme si l’œuvre d'art comprenait ce qu'on ressent.

But other times it gets tripped up

Mais, d'autres fois, c'est perturbant,

and has you thinking it doesn't understand you at all.

on a l'impression de ne pas avoir été du tout compris.

But the piece really serves to show

Cette œuvre d'art sert à montrer

that if we have a hard time explaining the emotions that we have to each other,

que, si on a du mal à expliquer nos émotions les uns aux autres,

how can we teach a computer to make sense of them?

comment apprendre à un ordinateur à les comprendre ?

So, even the more objective parts about being human are hard to describe.

Même les dimensions les plus objectives de l'homme sont dures à décrire.

Like, conversation.

Comme la conversation.

Have you ever really tried to break down the steps?

Avez-vous déjà brisé les étapes dans une conversation ?

So think about sitting with your friend at a coffee shop

Imaginez que vous êtes assis avec un ami à un café

and just having small talk.

parlant de tout et de rien.

How do you know when to take a turn?

Comment savoir quand prendre un tournant ?

How do you know when to shift topics?

Comment savoir quand changer de sujet ?

And how do you even know what topics to discuss?

Et même comment savoir de quels sujets parler ?

See, most of us don't really think about it,

La plupart de nous n'y pense pas vraiment,

because it's almost second nature.

c'est comme une seconde nature.

And when we get to know someone, we learn more about what makes them tick,

Quand on rencontre quelqu'un, on en apprend plus sur ses passions

and then we learn what topics we can discuss.

et on apprend de quels sujets on peut parler.

But when it comes to teaching AI systems how to interact with people,

Mais quand il faut enseigner à l'IA comment interagir avec les gens,

we have to teach them step by step what to do.

on doit lui expliquer étape par étape.

And right now, it feels clunky.

Actuellement, c'est encore trop inadapté.

If you've ever tried to talk with Alexa, Siri or Google Assistant,

Si vous avez déjà essayé de parler avec Alexa, Siri ou l'Assistant Google,

you can tell that it or they can still sound cold.

vous remarquerez que leurs réponses paraissent désincarnées.

And have you ever gotten annoyed

Avez-vous déjà été agacé

when they didn't understand what you were saying

quand ils n'ont pas compris ce que vous disiez

and you had to rephrase what you wanted 20 times just to play a song?

et que vous avez dû reformuler 20 fois votre requête pour écouter une chanson.

Alright, to the credit of the designers, realistic communication is really hard.

Il faut reconnaître aux designers

qu'une communication réaliste est très complexe.

And there's a whole branch of sociology,

Il y a une branche entière de la sociologie,

called conversation analysis,

l'analyse conversationnelle,

that tries to make blueprints for different types of conversation.

qui cherche à modéliser différents types de conversations.

Types like customer service or counseling, teaching and others.

Comme le service client, le conseil, l'enseignement, etc.

I've been collaborating with a conversation analyst at the lab

J'ai travaillé au laboratoire avec un analyste conversationnel

to try to help our AI systems hold more human-sounding conversations.

pour aider nos systèmes d'IA à discuter d'une façon qui semble plus humaine.

This way, when you have an interaction with a chatbot on your phone

Ainsi, en interagissant avec un chatbot sur son portable

or a voice-based system in the car,

ou avec un système vocal en voiture,

it sounds a little more human and less cold and disjointed.

l'échange semblera un peu plus humain, moins froid et désincarné.

So I created a piece of art

J'ai créé une œuvre d'art

that tries to highlight the robotic, clunky interaction

qui souligne les maladresses d'expression des robots

to help us understand, as designers,

pour aider les designers à comprendre

why it doesn't sound human yet and, well, what we can do about it.

pourquoi ils ne parlent pas encore comme des humains et ce qu'on peut y faire.

The piece is called Bot to Bot

Elle s'appelle Bot to Bot,

and it puts one conversational system against another

c'est l'interaction de deux systèmes conversationnels

and then exposes it to the general public.

qui est exposée au public.

And what ends up happening is that you get something

Au final, on arrive au résultat

that tries to mimic human conversation,

d'une tentative d'imiter une discussion,

but falls short.

sans y parvenir.

Sometimes it works and sometimes it gets into these, well,

Soit ça fonctionne, soit on reste

loops of misunderstanding.

dans des sortes de spirales de malentendus.

So even though the machine-to-machine conversation can make sense,

Si la conversation d'une machine à l'autre peut avoir du sens,

grammatically and colloquially,

grammaticalement et dans la forme,

it can still end up feeling cold and robotic.

elle paraît toujours froide et robotique.

And despite checking all the boxes, the dialogue lacks soul

Même en remplissant tous les critères, le dialogue manque d'âme

and those one-off quirks that make each of us who we are.

et de ces traits uniques qui font ce que nous sommes.

So while it might be grammatically correct

Même en étant grammaticalement correct

and uses all the right hashtags and emojis,

et en utilisant les hashtags et les emojis appropriés,

it can end up sounding mechanical and, well, a little creepy.

le dialogue finit par sembler mécanique et un peu sinistre.

And we call this the uncanny valley.

On appelle ça la vallée mystérieuse.

You know, that creepiness factor of tech

L'élément sinistre d'une technologie

where it's close to human but just slightly off.

qui est proche de l'humain, mais pas complètement.

And the piece will start being

Et mon œuvre va devenir

one way that we test for the humanness of a conversation

une façon de tester l'humanité d'une conversation

and the parts that get lost in translation.

et les éléments perdus dans la traduction.

So there are other things that get lost in translation, too,

D'autres choses sont aussi perdues dans la traduction,

like human intuition.

comme l'intuition humaine.

Right now, computers are gaining more autonomy.

Actuellement, les ordinateurs sont plus autonomes.

They can take care of things for us,

Ils peuvent nous rendre des services,

like change the temperature of our houses based on our preferences

comme changer la température de la maison selon nos préférences

and even help us drive on the freeway.

ou même aider à conduire sur une autoroute.

But there are things that you and I do in person

Mais vous et moi faisons certaines choses en personne

that are really difficult to translate to AI.

qui sont très difficiles à traduire à une IA.

So think about the last time that you saw an old classmate or coworker.

Pensez à votre dernière rencontre avec un ancien camarade de classe ou collègue.

Did you give them a hug or go in for a handshake?

Vous êtes-vous embrassés ou serré la main ?

You probably didn't think twice

Vous n'avez pas hésité un instant

because you've had so many built up experiences

car vous avez tellement passé de moments ensemble

that had you do one or the other.

que vous savez quoi faire.

And as an artist, I feel that access to one's intuition,

En tant qu'artiste, je sens qu'atteindre l'intuition de quelqu'un,

your unconscious knowing,

son savoir inconscient,

is what helps us create amazing things.

nous aide à créer des choses extraordinaires.

Big ideas, from that abstract, nonlinear place in our consciousness

Des grandes idées, depuis cet abstrait, ce lieu chaotique dans notre conscience

that is the culmination of all of our experiences.

où culminent toutes nos expériences.

And if we want computers to relate to us and help amplify our creative abilities,

Pour créer un lien avec les ordinateurs

et qu'ils amplifient nos capacités créatives,

I feel that we'll need to start thinking about how to make computers be intuitive.

je pense qu'il faudra réfléchir à comment rendre les ordinateurs plus intuitifs.

So I wanted to explore how something like human intuition

J'ai donc voulu comprendre comment l'intuition humaine

could be directly translated to artificial intelligence.

pourrait être traduite sans filtre à une intelligence artificielle.

And I created a piece that explores computer-based intuition

Et j'ai créé une œuvre qui explore l'intuition informatique

in a physical space.

dans l'espace physique.

The piece is called Wayfinding,

Cette œuvre s'appelle Wayfinding,

and it's set up as a symbolic compass that has four kinetic sculptures.

elle est formée d'un compas symbolique avec quatre sculptures cinétiques.

Each one represents a direction,

Chacune représente une direction :

north, east, south and west.

nord, est, sud et ouest.

And there are sensors set up on the top of each sculpture

Des capteurs sont placés au dessus de chaque sculpture

that capture how far away you are from them.

pour mesurer la distance entre elle et vous.

And the data that gets collected

Les données collectées

ends up changing the way that sculptures move

vont changer le mouvement des sculptures

and the direction of the compass.

et la direction du compas.

The thing is, the piece doesn't work like the automatic door sensor

L'installation ne fonctionne pas comme un capteur de porte automatique

that just opens when you walk in front of it.

qui s'ouvre juste en marchant devant elle.

See, your contribution is only a part of its collection of lived experiences.

Votre contribution n'est qu'une partie de sa collection d'expériences vécues.

And all of those experiences affect the way that it moves.

Toutes ces expériences influencent la façon dont l’œuvre d'art bouge.

So when you walk in front of it,

Donc quand on marche devant elle,

it starts to use all of the data

elle se met à utiliser tous les données

that it's captured throughout its exhibition history --

emmagasinées pendant toute l'exposition –

or its intuition --

ou son intuition –

to mechanically respond to you based on what it's learned from others.

pour nous répondre mécaniquement en utilisant ce qu'elle appris des autres.

And what ends up happening is that as participants

Au final, les participants

we start to learn the level of detail that we need

commencent à comprendre le niveau de détail nécessaire

in order to manage expectations

afin de gérer les attentes

from both humans and machines.

tant des humains que des machines.

We can almost see our intuition being played out on the computer,

On peut presque voir notre intuition interprétée sur l'ordinateur,

picturing all of that data being processed in our mind's eye.

représentant toutes les données traitées par notre œil et notre cerveau.

My hope is that this type of art

J'espère que ce type d'art

will help us think differently about intuition

nous aidera à penser différemment l'intuition

and how to apply that to AI in the future.

et comment l'intégrer à l'IA dans le futur.

So these are just a few examples of how I'm using art to feed into my work

Voici quelques exemples de mon utilisation de l'art pour nourrir mon travail

as a designer and researcher of artificial intelligence.

de designer et de chercheur en intelligence artificielle.

And I see it as a crucial way to move innovation forward.

Je le vois comme une méthode clé pour faire progresser l'innovation.

Because right now, there are a lot of extremes when it comes to AI.

Car, actuellement, il y a beaucoup d'opinions extrêmes sur l'IA.

Popular movies show it as this destructive force

Les blockbusters la présentent en force de destruction

while commercials are showing it as a savior

alors que les publicités l'encensent comme le sauveur,

to solve some of the world's most complex problems.

à même de résoudre des problèmes très complexes dans le monde.

But regardless of where you stand,

Mais quelles que soient nos opinions,

it's hard to deny that we're living in a world

il est dur de contester qu'on vit dans un monde

that's becoming more and more digital by the second.

qui devient de plus en plus numérique à chaque seconde.

Our lives revolve around our devices, smart appliances and more.

Nos vies tournent autour de nos appareils, des applications intelligentes, etc.

And I don't think this will let up any time soon.

Et je ne crois pas que ça va s'arrêter de sitôt.

So, I'm trying to embed more humanness from the start.

Je cherche donc à intégrer plus d'humanité dès le départ.

And I have a hunch that bringing art into an AI research process

J'ai le pressentiment qu'amener l'art

dans la recherche en intelligence artificielle

is a way to do just that.

est une façon d'y arriver.

Thank you.

Merci.

(Applause)

(Applaudissements)