Rana el Kaliouby: This app knows how you feel — from the look on your face

Переводчик: Alina Siluyanova Редактор: Volha ( Olya ) Douban

Our emotions influence every aspect of our lives,

Наши эмоции оказывают влияние на все стороны жизни:

from our health and how we learn, to how we do business and make decisions,

от здоровья и способов получения знаний, до ведения бизнеса и принятия

big ones and small.

важных либо не очень важных решений.

Our emotions also influence how we connect with one another.

Наши эмоции также влияют на то, как мы взаимодействуем друг с другом.

We've evolved to live in a world like this,

Мы созданы для жизни в мире эмоций,

but instead, we're living more and more of our lives like this --

но вместо этого всё чаще и чаще мы живём вот так —

this is the text message from my daughter last night --

это смс от моей дочери, которое я получила вчера вечером, —

in a world that's devoid of emotion.

в мире, напрочь этих эмоций лишённом.

So I'm on a mission to change that.

Я намерена это изменить.

I want to bring emotions back into our digital experiences.

Я хочу вернуть эмоции в наш цифровой мир.

I started on this path 15 years ago.

Этот путь я начала 15 лет назад.

I was a computer scientist in Egypt,

Я работала программистом в Египте

and I had just gotten accepted to a Ph.D. program at Cambridge University.

и только что поступила в аспирантуру в Кембридже.

So I did something quite unusual

Я сделала нечто несвойственное

for a young newlywed Muslim Egyptian wife:

молодым новобрачным мусульманкам-египтянкам:

With the support of my husband, who had to stay in Egypt,

при поддержке своего мужа, которому пришлось остаться в Египте,

I packed my bags and I moved to England.

я упаковала чемоданы и переехала в Англию.

At Cambridge, thousands of miles away from home,

В Кембридже, за тысячи километров от дома,

I realized I was spending more hours with my laptop

я осознала, что провожу за ноутбуком больше времени,

чем с людьми.

than I did with any other human.

Yet despite this intimacy, my laptop had absolutely no idea how I was feeling.

Но несмотря на эту близость, мой ноутбук не имел представления о моих чувствах.

It had no idea if I was happy,

Он не знал, счастлива ли я,

having a bad day, or stressed, confused,

был ли у меня тяжёлый день, напряжена ли я или потеряна,

and so that got frustrating.

и это стало меня расстраивать.

Even worse, as I communicated online with my family back home,

Даже хуже того: общаясь с семьёй онлайн,

I felt that all my emotions disappeared in cyberspace.

я чувствовала, как эмоции испаряются в киберпространстве.

I was homesick, I was lonely, and on some days I was actually crying,

Я скучала по дому, мне было одиноко, иногда я даже плакала,

but all I had to communicate these emotions was this.

и единственным способом передать все эти чувства было вот это.

(Laughter)

(Смех)

Today's technology has lots of I.Q., but no E.Q.;

Технологии сегодняшнего дня обладают огромным IQ, но не EQ —

lots of cognitive intelligence, but no emotional intelligence.

высокий показатель интеллекта, но никакого эмоционального интеллекта.

So that got me thinking,

Тогда я задумалась:

what if our technology could sense our emotions?

а что, если бы технологии могли ощущать наши эмоции?

What if our devices could sense how we felt and reacted accordingly,

Что, если бы наши устройства могли ощущать, как мы себя чувствуем, и реагировать

just the way an emotionally intelligent friend would?

в соответствии этому, как сделал бы эмоционально интеллектуальный друг?

Those questions led me and my team

Эти вопросы подтолкнули меня и мою команду

to create technologies that can read and respond to our emotions,

на создание технологий, способных понимать и отвечать на наши эмоции.

and our starting point was the human face.

И начали мы с человеческого лица.

So our human face happens to be one of the most powerful channels

Человеческое лицо — один из самых мощных каналов,

that we all use to communicate social and emotional states,

используемых нами для передачи социальных и эмоциональных состояний:

everything from enjoyment, surprise,

наслаждения, удивления,

empathy and curiosity.

сопереживания, любопытства.

In emotion science, we call each facial muscle movement an action unit.

В науке об эмоциях каждое движение мышцами лица мы называем действием.

So for example, action unit 12,

Например, действие 12 —

it's not a Hollywood blockbuster,

это не название голливудского блокбастера,

it is actually a lip corner pull, which is the main component of a smile.

а движение уголков губ вверх — главный компонент улыбки.

Try it everybody. Let's get some smiles going on.

Давайте-ка все попробуем улыбнуться!

Другой пример — действие 4. Это нахмуривание бровей.

Another example is action unit 4. It's the brow furrow.

It's when you draw your eyebrows together

Это когда сводишь брови вместе,

и получаются морщинки.

and you create all these textures and wrinkles.

Мы их не любим, но они — явный показатель негативной эмоции.

We don't like them, but it's a strong indicator of a negative emotion.

У нас 45 таких действий,

So we have about 45 of these action units,

and they combine to express hundreds of emotions.

и они комбинируются для передачи сотен эмоций.

Teaching a computer to read these facial emotions is hard,

Научить компьютер считывать выражения лица трудно,

because these action units, they can be fast, they're subtle,

потому что такие действия могут быть быстрыми, нечёткими

and they combine in many different ways.

и по-разному комбинироваться.

So take, for example, the smile and the smirk.

Возьмём, к примеру, улыбку и ухмылку.

They look somewhat similar, but they mean very different things.

Они выглядят похоже, но значат абсолютно разные вещи.

(Laughter)

(Смех)

So the smile is positive,

Улыбка позитивна,

а ухмылка часто негативна.

a smirk is often negative.

Иногда ухмылка может сделать вас знаменитым.

Sometimes a smirk can make you become famous.

But seriously, it's important for a computer to be able

Но если серьёзно, важно, чтобы компьютер

to tell the difference between the two expressions.

мог определить разницу между этими двумя выражениями.

So how do we do that?

Как это сделать?

We give our algorithms

Мы снабжаем наши алгоритмы

tens of thousands of examples of people we know to be smiling,

десятками тысяч примеров людей, которые точно улыбаются, —

from different ethnicities, ages, genders,

людей из разных этнических групп, разных возрастов, разного пола.

and we do the same for smirks.

То же самое мы делаем и для ухмылки.

And then, using deep learning,

А затем с помощью глубинного обучения

the algorithm looks for all these textures and wrinkles

алгоритм рассматривает все эти текстуры, морщинки

and shape changes on our face,

и изменения форм лица

and basically learns that all smiles have common characteristics,

и запоминает, что у всех улыбок есть общие характеристики,

all smirks have subtly different characteristics.

а у ухмылок — слегка иные характеристики.

And the next time it sees a new face,

В следующий раз, когда компьютер видит новое лицо,

it essentially learns that

он, по сути, узнаёт,

this face has the same characteristics of a smile,

что у этого лица есть те же самые характеристики улыбки,

and it says, "Aha, I recognize this. This is a smile expression."

и восклицает: «Ага! Узнаю. Это выражение улыбки».

So the best way to demonstrate how this technology works

Лучший способ показать эту технологию в работе —

is to try a live demo,

это живая демонстрация,

so I need a volunteer, preferably somebody with a face.

так что мне нужен волонтёр, желательно с лицом.

(Смех)

(Laughter)

Cloe's going to be our volunteer today.

Хлоя будет сегодня нашим волонтёром.

So over the past five years, we've moved from being a research project at MIT

За последние 5 лет мы превратились из исследовательского проекта в MIT

to a company,

в компанию,

where my team has worked really hard to make this technology work,

где моя команда упорно трудилась над тем, чтобы технология заработала,

как мы любим говорить, в естественных условиях.

as we like to say, in the wild.

And we've also shrunk it so that the core emotion engine

Мы также её уменьшили, и теперь центральное ядро эмоций

works on any mobile device with a camera, like this iPad.

работает на любом мобильном устройстве с камерой, как вот этот iPad.

So let's give this a try.

Давайте попробуем.

As you can see, the algorithm has essentially found Cloe's face,

Как вы видите, алгоритм обнаружил лицо Хлои —

so it's this white bounding box,

вот эта белая рамка —

and it's tracking the main feature points on her face,

и он отслеживает основные характерные точки на её лице:

so her eyebrows, her eyes, her mouth and her nose.

это её брови, глаза, рот и нос.

The question is, can it recognize her expression?

Вопрос в том, может ли он определить выражение её лица?

So we're going to test the machine.

Протестируем механизм.

So first of all, give me your poker face. Yep, awesome. (Laughter)

Сначала покажи мне каменное лицо. Да, супер. (Смех)

And then as she smiles, this is a genuine smile, it's great.

А затем, когда она улыбается... Искренняя улыбка, здорово!

So you can see the green bar go up as she smiles.

Видите, зелёная полоска растёт, когда она улыбается?

Now that was a big smile.

Это была широкая улыбка.

Can you try a subtle smile to see if the computer can recognize?

Можешь слегка улыбнуться, чтобы посмотреть, распознает ли компьютер?

It does recognize subtle smiles as well.

Да, распознаёт и неявные улыбки.

Мы усердно трудились, чтобы это работало.

We've worked really hard to make that happen.

Теперь подними бровь — индикатор удивления.

And then eyebrow raised, indicator of surprise.

Brow furrow, which is an indicator of confusion.

Сдвинь брови — индикатор замешательства. (Смех)

Frown. Yes, perfect.

Посмотри с неодобрением. Да, отлично.

So these are all the different action units. There's many more of them.

Это различного рода действия. Их гораздо больше.

This is just a slimmed-down demo.

Это короткая демонстрация.

But we call each reading an emotion data point,

Каждое считывание эмоции мы называем точкой данных.

and then they can fire together to portray different emotions.

Они подпитывают друг друга для изображения разных эмоций.

So on the right side of the demo -- look like you're happy.

На правой стороне демо — смотри, как будто ты счастливая.

So that's joy. Joy fires up.

Это радость. Радость усиливается.

And then give me a disgust face.

А теперь покажи мне отвращение.

Try to remember what it was like when Zayn left One Direction.

Вспомни, как Зейн ушёл из группы One Direction.

(Laughter)

(Смех)

Yeah, wrinkle your nose. Awesome.

Да, сморщи нос. Великолепно.

And the valence is actually quite negative, so you must have been a big fan.

Валентность весьма негативная, то есть ты, пожалуй, была фанатом.

So valence is how positive or negative an experience is,

Валентность — это насколько опыт положителен или отрицателен.

and engagement is how expressive she is as well.

А вовлечённость — насколько она выразительна.

So imagine if Cloe had access to this real-time emotion stream,

Представьте, если бы у Хлои был доступ к этому потоку эмоций в реальном времени

and she could share it with anybody she wanted to.

и она могла бы поделиться этим с кем угодно.

Thank you.

Спасибо.

(Аплодисменты)

(Applause)

So, so far, we have amassed 12 billion of these emotion data points.

На данный момент мы собрали 12 миллиардов таких вот точек данных.

It's the largest emotion database in the world.

Это самая крупная база данных эмоций в мире.

We've collected it from 2.9 million face videos,

Мы собрали её с 2,9 миллионов видео —

people who have agreed to share their emotions with us,

людей, согласившихся поделиться с нами своими эмоциями, —

and from 75 countries around the world.

из 75 стран мира.

It's growing every day.

База данных с каждым днём растёт.

It blows my mind away

Меня поражает, что теперь мы можем

that we can now quantify something as personal as our emotions,

измерять нечто настолько личное, как эмоции,

and we can do it at this scale.

причём в таком масштабе.

So what have we learned to date?

Что мы узнали на сегодняшний день?

Gender.

Данные о полах.

Our data confirms something that you might suspect.

Наши данные подтверждают то, о чём вы, пожалуй, сами догадываетесь:

Women are more expressive than men.

женщины более выразительны, чем мужчины.

Not only do they smile more, their smiles last longer,

Они не только чаще улыбаются, но и улыбки их длятся дольше.

and we can now really quantify what it is that men and women

И теперь мы можем измерить,

на что мужчины и женщины реагируют по-разному.

respond to differently.

Let's do culture: So in the United States,

Начнём с культуры:

в США женщины на 40% выразительнее мужчин,

women are 40 percent more expressive than men,

but curiously, we don't see any difference in the U.K. between men and women.

но любопытно, что в Англии подобного различия не наблюдается.

(Laughter)

(Смех)

Age: People who are 50 years and older

Возраст: люди от 50 лет и старше

are 25 percent more emotive than younger people.

на 25% более эмоциональны, чем те, кто моложе.

Women in their 20s smile a lot more than men the same age,

Женщины после 20 улыбаются куда чаще мужчин того же возраста,

perhaps a necessity for dating.

может, это необходимо для флирта.

But perhaps what surprised us the most about this data

Но, пожалуй, больше всего нас удивило то,

is that we happen to be expressive all the time,

что мы постоянно передаём эмоции,

even when we are sitting in front of our devices alone,

даже когда в одиночестве сидим за своими устройствами,

and it's not just when we're watching cat videos on Facebook.

причём не только когда смотрим видео о кошках на Facebook.

We are expressive when we're emailing, texting, shopping online,

Мы выражаем эмоции, когда пишем имейлы, смс, делаем покупки онлайн

or even doing our taxes.

или даже оформляем налоги.

Where is this data used today?

Где сейчас используются эти данные?

In understanding how we engage with media,

Для анализа взаимодействия со СМИ,

so understanding virality and voting behavior;

то есть чтобы изучить виральность и электоральное поведение;

а также в технологиях, делающих возможным проявление эмоций.

and also empowering or emotion-enabling technology,

and I want to share some examples that are especially close to my heart.

Я хочу поделиться несколькими дорогими мне примерами.

Emotion-enabled wearable glasses can help individuals

Очки с эмоциональной поддержкой позволяют пользователю

who are visually impaired read the faces of others,

со слабым зрением считывать лица окружающих,

and it can help individuals on the autism spectrum interpret emotion,

они могут помочь людям с аутизмом определять эмоции —

сложная задача для таких людей.

something that they really struggle with.

In education, imagine if your learning apps

В образовании: представьте, что ваше обучающее приложение

sense that you're confused and slow down,

чувствует, что вы запутались, и понижает темп,

or that you're bored, so it's sped up,

или чувствует, что вам скучно, и ускоряется,

just like a great teacher would in a classroom.

как бы сделал хороший учитель в классе.

What if your wristwatch tracked your mood,

Что, если бы наручные часы отслеживали ваше настроение

or your car sensed that you're tired,

или автомобиль ощущал, что вы устали,

or perhaps your fridge knows that you're stressed,

или, может, ваш холодильник чувствовал, что вы напряжены,

so it auto-locks to prevent you from binge eating. (Laughter)

и запирался, чтобы предотвратить обжорство. (Смех)

Мне бы такое понравилось.

I would like that, yeah.

What if, when I was in Cambridge,

Что, если бы, когда я была в Кембридже,

I had access to my real-time emotion stream,

у меня был доступ к моему эмоциональному потоку в реальном времени

and I could share that with my family back home in a very natural way,

и я могла бы поделиться им со своей семьёй,

just like I would've if we were all in the same room together?

как если бы они были со мной в одной комнате?

I think five years down the line,

Думаю, через 5 лет

all our devices are going to have an emotion chip,

у всех наших устройств будет эмоциональный чип,

and we won't remember what it was like when we couldn't just frown at our device

и мы забудем о тех временах, когда мы не могли просто нахмуриться,

and our device would say, "Hmm, you didn't like that, did you?"

а наше устройство сказало бы: «Тебе это не понравилось, не так ли?»

Our biggest challenge is that there are so many applications of this technology,

Наша наибольшая трудность в том,

что у этой технологии так много областей применения,

my team and I realize that we can't build them all ourselves,

что я и моя команда не можем всё делать в одиночку.

so we've made this technology available so that other developers

Мы сделали эту технологию доступной, чтобы другие разработчики

can get building and get creative.

могли начать свои проекты и творить.

We recognize that there are potential risks

Мы осознаём, что есть риск

and potential for abuse,

и возможность неправильного обращения,

but personally, having spent many years doing this,

но лично мне, после многих лет за этим делом,

I believe that the benefits to humanity

кажется, что польза для человечества

от наличия эмоционально интеллектуальной технологии

from having emotionally intelligent technology

far outweigh the potential for misuse.

значительно перевешивает риски злоупотребления.

And I invite you all to be part of the conversation.

Я приглашаю всех принять участие.

The more people who know about this technology,

Чем больше людей знают об этой технологии,

the more we can all have a voice in how it's being used.

тем больше возможности для каждого из нас высказаться о том, как её использовать.

So as more and more of our lives become digital,

По мере того, как наша жизнь всё больше становится цифровой,

we are fighting a losing battle trying to curb our usage of devices

мы ведём безнадёжную борьбу, пытаясь обуздать применение устройств,

in order to reclaim our emotions.

чтобы вернуть нам наши эмоции.

So what I'm trying to do instead is to bring emotions into our technology

Вместо этого я пытаюсь привнести эмоции в технологии

and make our technologies more responsive.

и сделать их более чуткими.

So I want those devices that have separated us

Я хочу, чтобы устройства, отделившие нас друг от друга,

to bring us back together.

снова нас объединили.

And by humanizing technology, we have this golden opportunity

Путём очеловечивания технологий мы обретаем блестящую возможность

to reimagine how we connect with machines,

переосмыслить то, как мы взаимодействуем с машинами,

and therefore, how we, as human beings,

а значит и то, как мы, люди,

connect with one another.

взаимодействуем друг с другом.

Thank you.

Спасибо.

(Аплодисменты)

(Applause)