How we can teach computers to make sense of our emotions | Raphael Arar

Translator: Ivana Korom Reviewer: Joanna Pietrulewicz

Traduttore: Martina Giambattista Revisore: Gabriella Patricola

Mi considero per metà un artista e per metà progettista.

E lavoro in un laboratorio di ricerca sull’intelligenza artificiale.

I consider myself one part artist and one part designer.

Proviamo a creare della tecnologia

con cui vorrete interagire nel lontano futuro.

And I work at an artificial intelligence research lab.

Non tra sei mesi, ma tra anni e decenni.

We're trying to create technology

that you'll want to interact with in the far future.

E scommettiamo sul fatto che vorremo interagire con i computer

Not just six months from now, but try years and decades from now.

in modi profondamente emotivi.

Quindi per fare ciò,

And we're taking a moonshot

la tecnologia deve essere tanto umana quanto artificiale.

that we'll want to be interacting with computers

in deeply emotional ways.

Deve capirci.

So in order to do that,

Come quella battuta che capite solo voi e il vostro migliore amico

the technology has to be just as much human as it is artificial.

e che vi fa ridere a crepapelle.

It has to get you.

O quello sguardo di delusione che si riesce a cogliere a kilometri di distanza.

You know, like that inside joke that'll have you and your best friend

on the floor, cracking up.

Io vedo l’arte come la via per chiudere la distanza tra l’uomo e la macchina:

Or that look of disappointment that you can just smell from miles away.

per capire cosa significa capirci a vicenda

I view art as the gateway to help us bridge this gap between human and machine:

così da insegnare all’IA a capire noi.

Vedete, per me l’arte è un modo di trasformare in esperienze tangibili

to figure out what it means to get each other

idee, sentimenti ed emozioni intangibili.

so that we can train AI to get us.

See, to me, art is a way to put tangible experiences

E penso che sia una delle cose più umane che esistono.

to intangible ideas, feelings and emotions.

Vedete, siamo gente complicata e complessa.

Abbiamo ciò che ci sembra una gamma infinita di emozioni,

And I think it's one of the most human things about us.

e per di più siamo tutti diversi.

See, we're a complicated and complex bunch.

Abbiamo diversi contesti famigliari,

diverse esperienze e diversi modi di pensare.

We have what feels like an infinite range of emotions,

and to top it off, we're all different.

E questo è ciò che rende la vita davvero interessante.

We have different family backgrounds,

Ma è anche ciò che rende lavorare sulla tecnologia intelligente

different experiences and different psychologies.

estremamente difficile.

And this is what makes life really interesting.

E al momento la ricerca sull’IA, beh,

But this is also what makes working on intelligent technology

è un po’ sbilanciata sul lato tecnologico.

extremely difficult.

E questo ha perfettamente senso.

Vedete, per ogni aspetto qualitativo che ci riguarda --

And right now, AI research, well,

quelle parti di noi che sono emotive, dinamiche e soggettive --

it's a bit lopsided on the tech side.

And that makes a lot of sense.

noi dobbiamo convertirlo su una scala quantitativa:

See, for every qualitative thing about us --

qualcosa che si può rappresentare con dati, grafici e codice.

you know, those parts of us that are emotional, dynamic and subjective --

we have to convert it to a quantitative metric:

Il problema è che ci sono molti aspetti qualitativi

something that can be represented with facts, figures and computer code.

che non riusciamo proprio a cogliere.

Pensate a quando avete sentito la vostra canzone preferita la prima volta

The issue is, there are many qualitative things

that we just can't put our finger on.

Cosa stavate facendo?

Come vi sentivate?

So, think about hearing your favorite song for the first time.

Vi è venuta la pelle d’oca?

O vi siete accesi di entusiasmo?

What were you doing?

Difficile da descrivere, vero?

How did you feel?

Did you get goosebumps?

Parti di noi ci sembrano così semplici,

ma sotto la superficie, c’è una grande complessità.

Or did you get fired up?

Hard to describe, right?

E tradurre tale complessità per le macchine

See, parts of us feel so simple,

è ciò che rende questi progetti incredibilmente ambiziosi.

but under the surface, there's really a ton of complexity.

Non sono convinto che si possa rispondere a queste domande profonde

And translating that complexity to machines

solo con degli zero e uno.

is what makes them modern-day moonshots.

Quindi in laboratorio creo dell’arte

And I'm not convinced that we can answer these deeper questions

in modo da aiutarmi a progettare esperienze migliori

per una tecnologia quasi in carne e ossa.

with just ones and zeros alone.

E serve come catalizzatore

per rafforzare i mezzi più umani con cui i computer possono avvicinarsi a noi.

So, in the lab, I've been creating art

as a way to help me design better experiences

for bleeding-edge technology.

Attraverso l’arte, approcciamo alcune domande difficili,

And it's been serving as a catalyst

come, cosa significa davvero provare emozioni?

to beef up the more human ways that computers can relate to us.

O, come ci rapportiamo e sappiamo come mostrarci presenti con gli altri?

Through art, we're tacking some of the hardest questions,

like what does it really mean to feel?

E in che modo l’intuizione influenza il nostro modo di interagire?

Or how do we engage and know how to be present with each other?

Prendete per esempio le emozioni umane.

And how does intuition affect the way that we interact?

Al momento, i computer riescono a capire quelle più basilari,

come gioia, tristezza, rabbia, paura e disgusto,

So, take for example human emotion.

trasformando quelle caratteristiche in linguaggio matematico.

Right now, computers can make sense of our most basic ones,

Ma le emozioni più complesse?

like joy, sadness, anger, fear and disgust,

Sapete, quelle emozioni

che facciamo fatica a descrivere gli uni agli altri?

by converting those characteristics to math.

Come la nostalgia.

But what about the more complex emotions?

Quindi, per esplorarlo, ho creato un’opera, un’esperienza,

You know, those emotions

che chiede alla gente di condividere un ricordo,

that we have a hard time describing to each other?

Like nostalgia.

e ho collaborato con alcuni data scientist

So, to explore this, I created a piece of art, an experience,

per capire come prendere un’emozione così altamente soggettiva

that asked people to share a memory,

e convertirla in qualcosa di matematicamente preciso.

and I teamed up with some data scientists

to figure out how to take an emotion that's so highly subjective

Così abbiamo creato un “punteggio nostalgia”

ed è il cuore di questa installazione.

and convert it into something mathematically precise.

Per farlo, l’installazione vi chiede di condividere una storia,

il computer poi ne analizza le emozioni più semplici,

So, we created what we call a nostalgia score

and it's the heart of this installation.

controlla la tendenza ad usare tempi verbali al passato,

To do that, the installation asks you to share a story,

e cerca anche parole che tendiamo ad associare alla nostalgia,

the computer then analyzes it for its simpler emotions,

come “casa”, “infanzia” e “passato”.

it checks for your tendency to use past-tense wording

Poi crea un punteggio nostalgia

and also looks for words that we tend to associate with nostalgia,

per indicare quanto la vostra storia è nostalgica.

like "home," "childhood" and "the past."

E quel punteggio è il motore dietro a queste sculture luminose

It then creates a nostalgia score

che servono da concretizzazione del vostro contributo.

to indicate how nostalgic your story is.

And that score is the driving force behind these light-based sculptures

E più il punteggio è alto, più rosea è la sfumatura.

Sapete, come guardare il mondo attraverso delle lenti rosate.

that serve as physical embodiments of your contribution.

Quindi, quando vedete il punteggio

And the higher the score, the rosier the hue.

e la sua rappresentazione fisica,

You know, like looking at the world through rose-colored glasses.

a volte sarete d’accordo e a volte no.

So, when you see your score

È come se avesse davvero capito come quell’esperienza vi ha fatto sentire.

and the physical representation of it,

Ma altre volte si confonde

sometimes you'd agree and sometimes you wouldn't.

e vi fa pensare che non vi capisca affatto.

It's as if it really understood how that experience made you feel.

Ma quest’opera serve a mostrare

che se facciamo fatica a spiegare le nostre emozioni agli altri,

But other times it gets tripped up

and has you thinking it doesn't understand you at all.

come possiamo insegnare ad un computer a capirle?

But the piece really serves to show

Anche le parti più oggettive del vivere da umani sono difficili da spiegare.

that if we have a hard time explaining the emotions that we have to each other,

Come la conversazione.

how can we teach a computer to make sense of them?

Avete mai provato davvero a scomporne i passaggi?

So, even the more objective parts about being human are hard to describe.

Immaginate di sedervi ad un bar con un amico

e di fare semplice conversazione.

Like, conversation.

Come sapete quando alternarvi?

Have you ever really tried to break down the steps?

Come sapete quando cambiare argomento?

So think about sitting with your friend at a coffee shop

Come sapete di che argomenti parlare?

and just having small talk.

How do you know when to take a turn?

La maggior parte di noi non ci pensa su,

How do you know when to shift topics?

perché è quasi una seconda natura.

E quando iniziamo a conoscere qualcuno, capiamo a cosa sono interessati

And how do you even know what topics to discuss?

e poi capiamo di che argomenti possiamo parlare.

See, most of us don't really think about it,

Ma quando si tratta di insegnare all’IA come interagire con le persone,

because it's almost second nature.

And when we get to know someone, we learn more about what makes them tick,

dobbiamo insegnare loro cosa fare passo per passo.

and then we learn what topics we can discuss.

E al momento, ci sembra maldestro.

But when it comes to teaching AI systems how to interact with people,

Se avete mai provato a parlare con Alexa, Siri, o Google Assistant,

we have to teach them step by step what to do.

And right now, it feels clunky.

vi accorgete che possono suonare ancora freddi.

If you've ever tried to talk with Alexa, Siri or Google Assistant,

E vi siete mei irritati

quando non capivano cosa stavate dicendo

you can tell that it or they can still sound cold.

e avete dovuto ripetere la richiesta 20 volte solo per riprodurre una canzone?

And have you ever gotten annoyed

Bene, in difesa dei progettisti, la comunicazione realistica è molto difficile

when they didn't understand what you were saying

and you had to rephrase what you wanted 20 times just to play a song?

e c’è un’intera branca della sociologia,

chiamata analisi della conversazione,

Alright, to the credit of the designers, realistic communication is really hard.

che prova a creare dei modelli per i diversi tipi di conversazione.

Tipi come servizio clienti, assistenza psicologica, insegnamento e altri.

And there's a whole branch of sociology,

called conversation analysis,

that tries to make blueprints for different types of conversation.

Io collaboro al laboratorio con un analista della conversazione

Types like customer service or counseling, teaching and others.

per aiutare i nostri sistemi IA a capire come tenere conversazioni più umane.

I've been collaborating with a conversation analyst at the lab

In questo modo, quando interagite con un chatbot sul telefono

to try to help our AI systems hold more human-sounding conversations.

o un sistema vocale nella macchina,

suona un po’ più umano e meno freddo e scollegato.

This way, when you have an interaction with a chatbot on your phone

Così ho creato un’opera

or a voice-based system in the car,

che prova a evidenziare un’interazione robotica, maldestra

it sounds a little more human and less cold and disjointed.

per provare a capire, come designer,

perché non suona ancora umana e come migliorarla.

So I created a piece of art

that tries to highlight the robotic, clunky interaction

Quest’opera è “Da Bot a Bot”

to help us understand, as designers,

e mette uno di fronte all’altro due sistemi di conversazione

why it doesn't sound human yet and, well, what we can do about it.

e poi li espone al pubblico.

E ciò che succede è che otteniamo qualcosa

The piece is called Bot to Bot

che prova a imitare la conversazione umana,

and it puts one conversational system against another

ma risulta carente.

and then exposes it to the general public.

A volte funziona e a volte entra in questi, beh,

And what ends up happening is that you get something

loop di malintesi.

that tries to mimic human conversation,

Quindi anche se la conversazione macchina-macchina può avere senso,

but falls short.

riguardo a grammatica e conversazione,

Sometimes it works and sometimes it gets into these, well,

può comunque risultare fredda e robotica.

loops of misunderstanding.

So even though the machine-to-machine conversation can make sense,

E anche se rispetta tutti i requisiti, al dialogo manca un’anima

grammatically and colloquially,

e quelle particolarità uniche che caratterizzano ciascuno di noi.

it can still end up feeling cold and robotic.

Quindi, anche se è grammaticalmente corretto

And despite checking all the boxes, the dialogue lacks soul

e usa tutti gli hashtag ed emoji giusti,

può risultare macchinoso e, beh, un po’ inquietante.

and those one-off quirks that make each of us who we are.

So while it might be grammatically correct

E la chiamiamo zona perturbante.

and uses all the right hashtags and emojis,

Sapete, l’inquietudine creata dalla tecnologia

it can end up sounding mechanical and, well, a little creepy.

quando è vicina all’umanità ma con qualcosa di sbagliato.

E quest’opera sarà

And we call this the uncanny valley.

un modo con cui testare l’umanità di una conversazione

You know, that creepiness factor of tech

e le parti che si perdono nella traduzione.

where it's close to human but just slightly off.

And the piece will start being

Ci sono anche altre cose che si perdono nella traduzione,

one way that we test for the humanness of a conversation

come l’intuizione umana.

Attualmente, i computer stanno acquisendo più autonomia.

and the parts that get lost in translation.

Possono fare delle cose al posto nostro,

So there are other things that get lost in translation, too,

come cambiare la temperatura di casa in base alle nostre preferenze

like human intuition.

e perfino aiutarci a guidare in autostrada.

Right now, computers are gaining more autonomy.

They can take care of things for us,

Ma ci sono cose che voi e io facciamo di persona

like change the temperature of our houses based on our preferences

che sono molto difficili da tradurre per l’IA.

and even help us drive on the freeway.

Pensate all’ultima volta che avete visto un vecchio compagno di classe o collega.

But there are things that you and I do in person

that are really difficult to translate to AI.

Li avete abbracciati o avete optato per una stretta di mano?

So think about the last time that you saw an old classmate or coworker.

Non ci avrete pensato due volte

perché avete avuto molte esperienze passate

che vi hanno fatto scegliere l’uno o l’altro.

Did you give them a hug or go in for a handshake?

In quanto artista, sento che l’accesso al proprio intuito,

You probably didn't think twice

because you've had so many built up experiences

il vostro sapere inconscio,

sia ciò che ci aiuta a creare cose incredibili.

that had you do one or the other.

Grandi idee da quella zona astratta e intricata della nostra coscienza

And as an artist, I feel that access to one's intuition,

your unconscious knowing,

che è il culmine di tutte le nostre esperienze.

is what helps us create amazing things.

Big ideas, from that abstract, nonlinear place in our consciousness

E se vogliamo che i computer si relazionino con noi

e ci aiutino ad amplificare le nostre abilità creative,

that is the culmination of all of our experiences.

Penso che dovremo iniziare a pensare a come rendere i computer intuitivi.

And if we want computers to relate to us and help amplify our creative abilities,

Dunque volevo esplorare come qualcosa come l’intuizione umana

potesse essere tradotta direttamente per l’intelligenza artificiale.

I feel that we'll need to start thinking about how to make computers be intuitive.

E ho creato un’opera che esplora l’intuizione computerizzata

So I wanted to explore how something like human intuition

in uno spazio fisico.

could be directly translated to artificial intelligence.

Si chiama “Trovare la strada”

ed è costruita come una bussola simbolica che ha quattro sculture cinetiche.

And I created a piece that explores computer-based intuition

Ognuna rappresenta una direzione,

in a physical space.

nord, est, sud e ovest.

The piece is called Wayfinding,

and it's set up as a symbolic compass that has four kinetic sculptures.

E ci sono dei sensori in cima ad ogni scultura

che rilevano quanto siete lontani da loro.

Each one represents a direction,

E i dati raccolti

north, east, south and west.

arrivano a modificare come le sculture si muovono

And there are sensors set up on the top of each sculpture

e la direzione della bussola.

that capture how far away you are from them.

Il fatto è, che l’opera non funziona come i sensori delle porte automatiche

And the data that gets collected

ends up changing the way that sculptures move

che semplicemente si aprono quando ci passate davanti.

and the direction of the compass.

Vedete, il vostro contributo è solo una parte della sua collezione di esperienze.

The thing is, the piece doesn't work like the automatic door sensor

E tutte quelle esperienze influenzano il modo in cui si muove.

that just opens when you walk in front of it.

See, your contribution is only a part of its collection of lived experiences.

Quindi quando ci camminate davanti,

inizia a usare tutti i dati

And all of those experiences affect the way that it moves.

che ha colto durante il suo periodo in esibizione --

o la sua intuizione --

So when you walk in front of it,

per rispondervi meccanicamente in base a ciò che ha imparato dagli altri.

it starts to use all of the data

that it's captured throughout its exhibition history --

E alla fine ciò che succede è che, in quanto partecipanti,

or its intuition --

noi iniziamo a capire il livello di dettaglio necessario

to mechanically respond to you based on what it's learned from others.

per gestire le aspettative

sia degli umani che delle macchine.

And what ends up happening is that as participants

Possiamo quasi vedere la nostra intuizione rappresentata sul computer,

we start to learn the level of detail that we need

in order to manage expectations

che mostra tutti i dati che vengono elaborati dalla nostra mente.

from both humans and machines.

La mia speranza è che questo tipo di arte

We can almost see our intuition being played out on the computer,

ci aiuterà a pensare diversamente all’intuizione

picturing all of that data being processed in our mind's eye.

e a come applicarla all’IA in futuro.

Questi sono solo alcuni esempi di come uso l’arte per integrare il mio lavoro

My hope is that this type of art

will help us think differently about intuition

di progettatore e ricercatore di intelligenza artificiale.

and how to apply that to AI in the future.

E lo vedo come un mezzo cruciale per proiettare in avanti l’innovazione.

So these are just a few examples of how I'm using art to feed into my work

Perché al momento, ci sono molte estremizzazioni riguardo all’IA.

as a designer and researcher of artificial intelligence.

And I see it as a crucial way to move innovation forward.

I film la mostrano come una forza distruttiva

mentre le pubblicità la mostrano come un salvatore

Because right now, there are a lot of extremes when it comes to AI.

per risolvere alcuni dei problemi più complessi nel mondo.

Popular movies show it as this destructive force

Ma a prescindere da come la pensate,

while commercials are showing it as a savior

è difficile negare che viviamo in un mondo

che sta diventando più digitale ogni secondo che passa.

to solve some of the world's most complex problems.

Le nostre vite ruotano attorno ai nostri dispositivi e accessori tecnologici.

But regardless of where you stand,

it's hard to deny that we're living in a world

E non penso che questo cambierà nel prossimo futuro.

that's becoming more and more digital by the second.

Our lives revolve around our devices, smart appliances and more.

Quindi sto cercando di inserirvi più umanità fin dall’inizio.

E ho la sensazione che portare l’arte nel processo di ricerca sull’IA

And I don't think this will let up any time soon.

So, I'm trying to embed more humanness from the start.

sia il modo per farlo.

Grazie.

And I have a hunch that bringing art into an AI research process

(Applausi)

is a way to do just that.

Thank you.

(Applause)