Rana el Kaliouby: This app knows how you feel — from the look on your face

Översättare: Annika Bidner Granskare: Lisbeth Pekkari

Our emotions influence every aspect of our lives,

Våra känslor påverkar varje del av våra liv

from our health and how we learn, to how we do business and make decisions,

från vår hälsa och hur vi lär oss, till hur vi gör affärer och fattar beslut,

big ones and small.

stora som små.

Our emotions also influence how we connect with one another.

Våra känslor påverkar också hur vi knyter an till varandra.

We've evolved to live in a world like this,

Vi har utvecklats för att leva i en sån här värld,

but instead, we're living more and more of our lives like this --

men nu lever vi istället mer och mer såna här liv -

this is the text message from my daughter last night --

det här är ett sms som jag fick från min dotter igår kväll -

in a world that's devoid of emotion.

i en värld som är tömd på känslor.

So I'm on a mission to change that.

Jag ser som mitt uppdrag att förändra det.

I want to bring emotions back into our digital experiences.

Jag vill föra tillbaka känslorna i våra digitala upplevelser.

I started on this path 15 years ago.

Jag började med det för 15 år sen.

I was a computer scientist in Egypt,

Jag var dataingenjör i Egypten

and I had just gotten accepted to a Ph.D. program at Cambridge University.

och hade just blivit antagen

till en forskarutbildning vid Cambridge University.

So I did something quite unusual

Jag gjorde något ganska ovanligt

for a young newlywed Muslim Egyptian wife:

för att vara en ung nygift muslimsk egyptisk fru:

With the support of my husband, who had to stay in Egypt,

Med stöd från min man som blev tvungen att stanna i Egypten

I packed my bags and I moved to England.

packade jag mina väskor och flyttade till England.

At Cambridge, thousands of miles away from home,

I Cambridge, tusentals kilometer hemifrån,

I realized I was spending more hours with my laptop

insåg jag att jag tillbringade fler timmar med min laptop

än jag gjorde med någon människa.

than I did with any other human.

Yet despite this intimacy, my laptop had absolutely no idea how I was feeling.

Trots detta nära band visste inte datorn något om hur jag kände mig.

It had no idea if I was happy,

Den visste inte om jag var glad,

having a bad day, or stressed, confused,

om jag hade en dålig dag, eller var stressad, förvirrad,

and so that got frustrating.

och det blev frustrerande.

Even worse, as I communicated online with my family back home,

Ännu värre var det när jag kommunicerade med min familj därhemma, och kände

I felt that all my emotions disappeared in cyberspace.

att mina känslor försvann i cyberrymden.

I was homesick, I was lonely, and on some days I was actually crying,

Jag längtade hem, jag kände mig ensam, och vissa dagar grät jag,

but all I had to communicate these emotions was this.

men allt jag kunde använda för att kommunicera känslorna var den här.

(Laughter)

(Skratt)

Today's technology has lots of I.Q., but no E.Q.;

Dagens teknik har mycket IQ, men ingen EQ;

lots of cognitive intelligence, but no emotional intelligence.

hög kognitiv intelligens men ingen emotionell intelligens.

So that got me thinking,

Det fick mig att börja fundera på

what if our technology could sense our emotions?

hur det skulle bli om vår teknik skulle kunna känna av våra känslor?

What if our devices could sense how we felt and reacted accordingly,

Om våra maskiner kunde känna av vårt humör och bete sig i enlighet med det,

just the way an emotionally intelligent friend would?

som en emotionellt intelligent vän?

Those questions led me and my team

De här frågorna gjorde att jag och mitt team

började skapa teknik som kan läsa av och reagera på våra känslor,

to create technologies that can read and respond to our emotions,

and our starting point was the human face.

och vi började med det mänskliga ansiktet.

So our human face happens to be one of the most powerful channels

Det mänskliga ansiktet råkar vara en av de bästa kanaler

that we all use to communicate social and emotional states,

som vi använder för att kommunicera sociala och känslomässiga tillstånd,

everything from enjoyment, surprise,

allt från njutning, överraskning,

empathy and curiosity.

empati och nyfikenhet.

In emotion science, we call each facial muscle movement an action unit.

Inom känslovetenskap kallas en rörelse hos en ansiktsmuskel för "aktiv enhet".

So for example, action unit 12,

Den tolfte aktiva enheten

it's not a Hollywood blockbuster,

är inte en toppfilm från Hollywood

it is actually a lip corner pull, which is the main component of a smile.

utan en uppdragen mungipa, vilket är huvudkomponenten i ett leende.

Try it everybody. Let's get some smiles going on.

Prova det allihop. Nu ler vi lite.

Another example is action unit 4. It's the brow furrow.

Ett annat exempel är fjärde aktiva enheten.

It's when you draw your eyebrows together

Det är när man drar ihop ögonbrynen

and you create all these textures and wrinkles.

och får den här ytan och rynkorna.

We don't like them, but it's a strong indicator of a negative emotion.

Vi tycker inte om dem, men det är en stark indikator på en negativ känsla.

So we have about 45 of these action units,

Vi har ungefär 45 aktiva enheter,

and they combine to express hundreds of emotions.

och de kan kombineras för att uttrycka hundratals känslor.

Teaching a computer to read these facial emotions is hard,

Att lära en dator att läsa av känslouttryck i ansiktet är svårt,

because these action units, they can be fast, they're subtle,

för de aktiva enheterna kan vara snabba och subtila

and they combine in many different ways.

och de går att kombinera på många olika sätt.

So take, for example, the smile and the smirk.

Ta till exempel leendet och hånflinet.

They look somewhat similar, but they mean very different things.

De ser ganska lika ut, men de betyder helt olika saker.

(Laughter)

(Skratt)

So the smile is positive,

Ett leende är positivt,

a smirk is often negative.

ett flin är ofta negativt.

Sometimes a smirk can make you become famous.

Ibland kan ett flin göra en känd.

But seriously, it's important for a computer to be able

Men trots allt är det viktigt för en dator att kunna

to tell the difference between the two expressions.

se skillnad mellan de här två uttrycken.

So how do we do that?

Hur gör vi det?

We give our algorithms

Vi ger våra algoritmer

tiotusentals exempel av människor som vi vet ler,

tens of thousands of examples of people we know to be smiling,

from different ethnicities, ages, genders,

med olika etnisk bakgrund, ålder, kön,

and we do the same for smirks.

och vi gör samma sak för flin.

Och genom maskininlärning

And then, using deep learning,

the algorithm looks for all these textures and wrinkles

letar algoritmen efter såna här ytor och rynkor

and shape changes on our face,

och formändringar i vårt ansikte

and basically learns that all smiles have common characteristics,

och lär sig helt enkelt att alla leenden har egenskaper gemensamt,

all smirks have subtly different characteristics.

medan alla flin har något annorlunda egenskaper.

And the next time it sees a new face,

Och nästa gång den ser ett nytt ansikte

it essentially learns that

märker den att

this face has the same characteristics of a smile,

det här ansiktet har samma egenskaper som ett leende ansikte och den säger:

and it says, "Aha, I recognize this. This is a smile expression."

"Aha, jag känner igen det här. Det är ett leende uttryck."

So the best way to demonstrate how this technology works

Det bästa sättet att visa hur tekniken fungerar

is to try a live demo,

är genom en livedemo,

so I need a volunteer, preferably somebody with a face.

så jag behöver en frivillig, helst någon med ett ansikte.

(Laughter)

(Skratt)

Cloe's going to be our volunteer today.

Cloe blir vår frivilliga idag.

So over the past five years, we've moved from being a research project at MIT

De senaste fem åren har vi utvecklats från att vara ett projekt på MIT

to a company,

till att bli ett företag,

where my team has worked really hard to make this technology work,

där mitt team har jobbat mycket hårt för att få tekniken att fungera,

as we like to say, in the wild.

som vi säger, i naturen.

And we've also shrunk it so that the core emotion engine

Vi har också krympt den så att känslomotorn

works on any mobile device with a camera, like this iPad.

fungerar i alla mobila enheter med kamera, som den här iPaden.

So let's give this a try.

Vi testar.

As you can see, the algorithm has essentially found Cloe's face,

Som ni kan se har algoritmen hittat Cloes ansikte,

so it's this white bounding box,

det är den här vita inramande rutan,

and it's tracking the main feature points on her face,

och den spårar huvudpunkterna i hennes ansikte,

so her eyebrows, her eyes, her mouth and her nose.

hennes ögonbryn, ögon, mun och näsa.

The question is, can it recognize her expression?

Frågan är, kan den läsa av hennes uttryck?

So we're going to test the machine.

Vi ska testa maskinen.

So first of all, give me your poker face. Yep, awesome. (Laughter)

Först av allt, ge mig ett pokerfejs. Ja, jättebra. (Skratt)

And then as she smiles, this is a genuine smile, it's great.

Och när hon sen ler är det ett riktigt leende, det är fint.

So you can see the green bar go up as she smiles.

Ni kan se att den gröna stapeln går upp när hon ler.

Now that was a big smile.

Det var ett stort leende.

Can you try a subtle smile to see if the computer can recognize?

Kan du prova ett litet leende och se om datorn kan känna igen det?

It does recognize subtle smiles as well.

Den känner igen småleenden också.

Vi har jobbat hårt för att det ska fungera.

We've worked really hard to make that happen.

Och sen höjda ögonbryn, ett tecken på förvåning.

And then eyebrow raised, indicator of surprise.

Brow furrow, which is an indicator of confusion.

Rynkade ögonbryn, vilket är ett tecken på förvirring.

Frown. Yes, perfect.

Rynka pannan. Ja, perfekt.

So these are all the different action units. There's many more of them.

Det är de olika aktiva enheterna. Det finns många fler.

This is just a slimmed-down demo.

Det här är bara en förenklad demo.

But we call each reading an emotion data point,

Vi kallar varje avläsning för en emotionell datapunkt,

and then they can fire together to portray different emotions.

och de kan aktiveras tillsammans för att visa olika känslor.

So on the right side of the demo -- look like you're happy.

Så på högra sidan - se glad ut.

So that's joy. Joy fires up.

Det är lycka. Lycka lyser upp.

And then give me a disgust face.

Ge mig sen en min av avsmak.

Try to remember what it was like when Zayn left One Direction.

Försök minnas hur det var när Zayn lämnade One Direction.

(Laughter)

(Skratt)

Yeah, wrinkle your nose. Awesome.

Ja, rynka näsan. Perfekt.

And the valence is actually quite negative, so you must have been a big fan.

Och uttrycket är starkt negativt, så du måste ha varit ett stort fan.

So valence is how positive or negative an experience is,

Värde är hur positiv eller negativ en upplevelse är,

and engagement is how expressive she is as well.

och engagemang är hur uttrycksfull hon är.

So imagine if Cloe had access to this real-time emotion stream,

Tänk er att Cloe hade tillgång till den här känsloströmmen i realtid,

and she could share it with anybody she wanted to.

och kunde dela den med vem hon ville.

Thank you.

Tack.

(Applåder)

(Applause)

So, so far, we have amassed 12 billion of these emotion data points.

Så här långt har vi samlat in 12 miljarder såna här datapunkter.

Det är den största databasen för känslor i världen.

It's the largest emotion database in the world.

We've collected it from 2.9 million face videos,

Vi har samlat in den från 2,9 miljoner filmer på ansikten,

people who have agreed to share their emotions with us,

människor som har gått med på att dela sina känslor med oss,

and from 75 countries around the world.

från 75 länder i världen.

It's growing every day.

Det blir fler och fler varje dag.

It blows my mind away

Det känns fantastiskt

that we can now quantify something as personal as our emotions,

att vi nu kan kvantifiera något så personligt som våra känslor,

and we can do it at this scale.

och vi kan göra det i den här skalan.

So what have we learned to date?

Vad har vi då lärt oss så här långt?

Gender.

Kön.

Our data confirms something that you might suspect.

Vår data bekräftar något som du kanske misstänker.

Women are more expressive than men.

Kvinnor är mer uttrycksfulla än män.

Not only do they smile more, their smiles last longer,

De inte bara ler mer, deras leenden pågår längre,

and we can now really quantify what it is that men and women

och vi kan nu verkligen mäta vad det är som män och kvinnor

respond to differently.

reagerar olika på.

Let's do culture: So in the United States,

Om vi tittar på kultur:

I USA är kvinnor 40 procent mer uttrycksfulla än män,

women are 40 percent more expressive than men,

men lustigt nog ser vi ingen skillnad mellan män och kvinnor i Storbritannien.

but curiously, we don't see any difference in the U.K. between men and women.

(Laughter)

(Skratt)

Age: People who are 50 years and older

Ålder: Människor som är 50 år och äldre

are 25 percent more emotive than younger people.

är 25 procent mer emotionella än unga människor.

Women in their 20s smile a lot more than men the same age,

Kvinnor i 20-årsåldern ler mycket mer än män i samma ålder,

perhaps a necessity for dating.

kanske är det nödvändigt vid dejter.

But perhaps what surprised us the most about this data

Men det som förvånade oss mest

is that we happen to be expressive all the time,

är att vi uttrycker oss hela tiden,

even when we are sitting in front of our devices alone,

även när vi sitter ensamma framför våra skärmar,

and it's not just when we're watching cat videos on Facebook.

och det är inte bara när vi tittar på kattvideos på Facebook.

Vi är uttycksfulla när vi skickar e-post, textmeddelanden, handlar online,

We are expressive when we're emailing, texting, shopping online,

or even doing our taxes.

till och med när vi deklarerar.

Where is this data used today?

Var används den här informationen idag?

In understanding how we engage with media,

Genom att förstå hur vi interagerar med medier kan vi förstå

so understanding virality and voting behavior;

viral budskapsspridning och röstbeteenden

and also empowering or emotion-enabling technology,

och även föra in möjligheten till känslouttryck i tekniken,

and I want to share some examples that are especially close to my heart.

och jag vill dela med mig av några exempel som ligger mig speciellt varmt om hjärtat.

Emotion-enabled wearable glasses can help individuals

Känslostyrda glasögon kan hjälpa människor

who are visually impaired read the faces of others,

med synnedsättning att läsa av andras ansikten,

and it can help individuals on the autism spectrum interpret emotion,

och det kan hjälpa individer med autism att tolka känslor,

something that they really struggle with.

något som de verkligen kämpar med.

In education, imagine if your learning apps

Inom utbildning, tänk dig att dina läroappar

sense that you're confused and slow down,

känner av att du är förvirrad och saktar ner,

or that you're bored, so it's sped up,

eller om du är uttråkad kan de öka tempot,

just like a great teacher would in a classroom.

precis som en riktigt bra lärare skulle göra i klassrummet.

What if your wristwatch tracked your mood,

Tänk om din armbandsklocka kunde mäta hur du mår,

or your car sensed that you're tired,

eller om din bil kunde veta att du var trött,

or perhaps your fridge knows that you're stressed,

eller kanske din kyl vet om att du är stressad,

so it auto-locks to prevent you from binge eating. (Laughter)

så att den låser sig automatiskt för att undvika att du proppar i dig.

Det skulle jag vilja ha.

I would like that, yeah.

(Skratt)

What if, when I was in Cambridge,

Tänk om jag hade hade haft tillgång

I had access to my real-time emotion stream,

till mina känslor i realtid i Cambridge,

and I could share that with my family back home in a very natural way,

och jag hade kunnat dela den med min familj på ett naturligt sätt,

just like I would've if we were all in the same room together?

på samma sätt som om vi hade varit i samma rum tillsammans?

I think five years down the line,

Jag tror att om fem år

all our devices are going to have an emotion chip,

kommer våra enheter att ha ett känslochip

and we won't remember what it was like when we couldn't just frown at our device

och vi kommer inte att minnas hur det var när vi inte kunde rynka pannan åt maskinen

and our device would say, "Hmm, you didn't like that, did you?"

och den sa "Hmm, det där gillade du inte va?"

Our biggest challenge is that there are so many applications of this technology,

Vår största utmaning är att det finns så många tillämpningar för tekniken,

my team and I realize that we can't build them all ourselves,

så jag och mitt team inser att vi inte kan bygga alla själva,

so we've made this technology available so that other developers

så vi har gjort tekniken tillgänglig så att andra utvecklare

kan börja skapa på ett kreativt sätt.

can get building and get creative.

We recognize that there are potential risks

Vi inser att det finns potientiella risker

and potential for abuse,

och möjligheter till missbruk,

but personally, having spent many years doing this,

men jag tror, efter att ha använt detta i många år,

I believe that the benefits to humanity

att fördelarna för mänskligheten

av att ha emotionellt intelligent teknik

from having emotionally intelligent technology

far outweigh the potential for misuse.

mer än väl uppväger konsekvenserna av felaktig användning.

And I invite you all to be part of the conversation.

Och jag bjuder in er alla att ta del i diskussionen.

The more people who know about this technology,

Ju fler människor som känner till den här tekniken,

the more we can all have a voice in how it's being used.

desto mer kan vi uttrycka åsikter om hur den ska användas.

So as more and more of our lives become digital,

Så när allt fler delar av våra liv blir digitala

we are fighting a losing battle trying to curb our usage of devices

utkämpar vi en ojämn kamp för att begränsa användningen av digitala enheter

in order to reclaim our emotions.

och kunna återta våra känslor.

So what I'm trying to do instead is to bring emotions into our technology

Vad jag istället försöker göra är att föra in känslorna i tekniken

and make our technologies more responsive.

och göra vår teknik mer lyhörd.

So I want those devices that have separated us

Jag vill att maskinerna som har separerat oss

to bring us back together.

ska föra oss samman igen.

And by humanizing technology, we have this golden opportunity

Och genom att göra tekniken mer human har vi ett gyllene tillfälle

to reimagine how we connect with machines,

att tänka om hur vi umgås med maskiner,

and therefore, how we, as human beings,

och därmed hur vi som människor

connect with one another.

umgås med varandra.

Thank you.

Tack.

(Applause)

(Applåder)