Daphne Koller: What we're learning from online education

Дафна Коллер: Чему нас учит онлайн-образование

Translator: Morton Bast Reviewer: Thu-Huong Ha

Переводчик: Inna Kouper Редактор: Kateryna Mysak

Like many of you, I'm one of the lucky people.

Мне, как и многим из вас, повезло.

I was born to a family where education was pervasive.

Я родилась в образованной семье.

I'm a third-generation PhD, a daughter of two academics.

Я дочь двух профессоров, третье поколение с научной степенью.

In my childhood, I played around in my father's university lab.

В детстве я играла в научной лаборатории отца.

So it was taken for granted that I attend some of the best universities,

И моя учёба в хорошем университете — нечто как бы само собой разумеющееся.

which in turn opened the door to a world of opportunity.

Это открыло передо мной целый мир возможностей.

Unfortunately, most of the people in the world are not so lucky.

К сожалению, большинству людей не так повезло.

In some parts of the world, for example, South Africa,

В некоторых странах, например, в ЮАР,

education is just not readily accessible.

образование не так доступно.

In South Africa, the educational system was constructed

В ЮАР система образования сформировалась

in the days of apartheid for the white minority.

во времена апартеида для белого меньшинства.

And as a consequence, today there is just not enough spots

И как следствие, сегодня не хватает места всем,

for the many more people who want and deserve a high quality education.

кто хочет и заслуживает образования высокого качества.

That scarcity led to a crisis in January of this year

В январе этого года нехватка мест спровоцировала кризис

at the University of Johannesburg.

в университете Йоханнесбурга.

There were a handful of positions left open

Там оставалось несколько свободных мест

from the standard admissions process, and the night before

после обычного набора, и в ночь перед тем,

they were supposed to open that for registration,

как должны были начать приём на эти места,

thousands of people lined up outside the gate in a line a mile long,

тысячи людей выстроились за воротами в километровую очередь,

hoping to be first in line to get one of those positions.

надеясь получить одно из этих мест.

When the gates opened, there was a stampede,

Когда ворота открылись, началась давка,

and 20 people were injured and one woman died.

20 человек были ранены, и одна женщина погибла.

She was a mother who gave her life

Это была мать, отдавшая свою жизнь за то,

trying to get her son a chance at a better life.

чтобы её сын получил шанс на лучшую жизнь.

But even in parts of the world like the United States

И даже в таких странах, как США,

where education is available, it might not be within reach.

где образование доступно, оно может быть недостижимым.

There has been much discussed in the last few years

Много говорят в последние несколько лет

about the rising cost of health care.

о растущих затратах на здравоохранение.

What might not be quite as obvious to people

И для многих не так очевидно,

is that during that same period the cost of higher education tuition

что стоимость высшего образования за тот же период

has been increasing at almost twice the rate,

росло почти в два раза быстрее.

for a total of 559 percent since 1985.

В общей сложности на 559% с 1985 года.

This makes education unaffordable for many people.

Вследствие этого образование становится недоступным для многих.

Finally, even for those who do manage to get the higher education,

Наконец, даже для тех, кто смог получить высшее образование,

the doors of opportunity might not open.

многие возможности остаются закрытыми.

Only a little over half of recent college graduates

Лишь чуть больше половины выпускников в США,

in the United States who get a higher education

которые получили высшее образование,

actually are working in jobs that require that education.

работают по специальности.

This, of course, is not true for the students

Конечно, это не относится

who graduate from the top institutions,

к выпускникам ведущих вузов,

but for many others, they do not get the value

а к остальным, чьи время и усилия

for their time and their effort.

остаются без вознаграждения.

Tom Friedman, in his recent New York Times article,

Том Фридман в своей недавней статье в «Нью-Йорк Таймс»

captured, in the way that no one else could, the spirit behind our effort.

особенно хорошо это выразил.

He said the big breakthroughs are what happen

Он сказал, что большие прорывы происходят тогда,

when what is suddenly possible meets what is desperately necessary.

когда ставшее вдруг возможным соединяется с крайне необходимым.

I've talked about what's desperately necessary.

Я рассказала о том, что нам крайне необходимо.

Let's talk about what's suddenly possible.

Давайте поговорим о том, что стало вдруг возможным.

What's suddenly possible was demonstrated by

Такое «вдруг возможное» было продемонстрировано

three big Stanford classes,

на трёх курсах Стэнфордского университета,

each of which had an enrollment of 100,000 people or more.

на каждый из которых записалось 100 000 человек.

So to understand this, let's look at one of those classes,

Чтобы лучше понять всё это, давайте посмотрим на один из этих курсов —

the Machine Learning class offered by my colleague

«Машинное обучение», предлагаемый моим коллегой

and cofounder Andrew Ng.

и соучредителем Эндрю Энг [Andrew Ng].

Andrew teaches one of the bigger Stanford classes.

Эндрю ведёт один из самых больших курсов в Стэнфорде —

It's a Machine Learning class,

«Машинное обучение».

and it has 400 people enrolled every time it's offered.

Каждый раз у него набирается по 400 студентов.

When Andrew taught the Machine Learning class to the general public,

Когда он предложил этот курс для широкой публики,

it had 100,000 people registered.

зарегистрировалось 100 000 человек.

So to put that number in perspective,

Для сравнения:

for Andrew to reach that same size audience

чтобы достичь такой аудитории студентов,

by teaching a Stanford class,

в Стэнфорде,

he would have to do that for 250 years.

Эндрю пришлось бы преподавать 250 лет.

Of course, he'd get really bored.

Конечно, ему стало бы очень скучно.

So, having seen the impact of this,

Увидев такое желание людей учиться,

Andrew and I decided that we needed to really try and scale this up,

Эндрю и я решили, что надо расширить нашу аудиторию,

to bring the best quality education to as many people as we could.

чтобы дать лучшее образование как можно большему количеству людей.

So we formed Coursera,

Тогда мы создали компанию Coursera,

whose goal is to take the best courses

цель которой — использовать лучшие курсы

from the best instructors at the best universities

лучших преподавателей в лучших университетах

and provide it to everyone around the world for free.

и предоставлять доступ к ним во всём мире бесплатно.

We currently have 43 courses on the platform

В настоящее время у нас 43 курса

from four universities across a range of disciplines,

по разным дисциплинам из четырёх университетов.

and let me show you a little bit of an overview

Позвольте показать вам,

of what that looks like.

как это выглядит.

(Video) Robert Ghrist: Welcome to Calculus.

(Видео) Р. Грист: «Добро пожаловать в Calculus!»

Ezekiel Emanuel: Fifty million people are uninsured.

И. Эмануэль: «Пятьдесят миллионов человек не имеют страховки».

Scott Page: Models help us design more effective institutions and policies.

С. Пейдж: «Модели помогают нам принимать более эффективные решения».

We get unbelievable segregation.

«У нас невероятная сегрегация».

Scott Klemmer: So Bush imagined that in the future,

С. Клеммер: «Буш думал, что в будущем

you'd wear a camera right in the center of your head.

у вас будет фотоаппарат прямо на голове».

Mitchell Duneier: Mills wants the student of sociology to develop the quality of mind ...

М. Данье: «Миллс предлагает социологу развивать свой разум так...»

RG: Hanging cable takes on the form of a hyperbolic cosine.

РГ: «Висящий кабель принимает форму гиперболического косинуса».

Nick Parlante: For each pixel in the image, set the red to zero.

Н. Парланте: «Для каждого пикселя в изображении зададим параметр красного равный нулю».

Paul Offit: ... Vaccine allowed us to eliminate polio virus.

П. Оффит: «Прививки позволили нам устранить вирус полиомиелита».

Dan Jurafsky: Does Lufthansa serve breakfast and San Jose? Well, that sounds funny.

Д. Журафски: «Lufthansa подаёт завтрак и Сан-Хосе? Звучит абсурдно».

Daphne Koller: So this is which coin you pick, and this is the two tosses.

Д. Коллер: «Вот тут монеты для выбора, а тут два броска».

Andrew Ng: So in large-scale machine learning, we'd like to come up with computational ...

Э. Энг: «В задачах крупномасштабного компьютерного обучения мы хотели бы придумать...»

(Applause)

(Аплодисменты)

DK: It turns out, maybe not surprisingly,

Д.К.: Оказывается, может это и не удивительно,

that students like getting the best content

что студентам нравится получать лучшее

from the best universities for free.

из лучших университетов бесплатно.

Since we opened the website in February,

С тех пор как мы открыли сайт в феврале,

we now have 640,000 students from 190 countries.

у нас появилось 640 000 студентов из 190 стран.

We have 1.5 million enrollments,

У нас 1,5 млн. регистраций,

6 million quizzes in the 15 classes that have launched

нам сдали 6 млн. контрольных работ по 15 предметам,

so far have been submitted, and 14 million videos have been viewed.

и было просмотрено 14 млн. видео.

But it's not just about the numbers,

Но дело не только в цифрах.

it's also about the people.

Дело также в людях.

Whether it's Akash, who comes from a small town in India

Будь это Акаш из маленького городка в Индии,

and would never have access in this case

у которого никогда не было доступа

to a Stanford-quality course

к курсам стэнфордского качества,

and would never be able to afford it.

и никогда не было таких финансовых возможностей.

Or Jenny, who is a single mother of two

Или Дженни, мать-одиночка с двумя детьми,

and wants to hone her skills

которая хочет немного подучиться,

so that she can go back and complete her master's degree.

чтобы вернуться в университет и получить степень магистра.

Or Ryan, who can't go to school,

Или Райан, который не смог учиться,

because his immune deficient daughter

потому что у его дочери иммунная болезнь,

can't be risked to have germs come into the house,

и в дом нельзя приносить бактерии,

so he couldn't leave the house.

поэтому он вынужден сидеть дома.

I'm really glad to say --

С радостью могу сказать,

recently, we've been in correspondence with Ryan --

что мы переписывались с Райаном,

that this story had a happy ending.

и у этой истории счастливый конец.

Baby Shannon -- you can see her on the left --

Его дочка Шэннон — она слева —

is doing much better now,

чувствует себя гораздно лучше,

and Ryan got a job by taking some of our courses.

и Райан нашёл работу благодаря нашим курсам.

So what made these courses so different?

Чем же наши курсы отличаются от остальных?

After all, online course content has been available for a while.

В конце концов, онлайн-обучение уже давно существует.

What made it different was that this was real course experience.

Отличие в том, что это настоящее университетское обучение.

It started on a given day,

Оно начинается в определённый день,

and then the students would watch videos on a weekly basis

и студенты смотрят видео еженедельно,

and do homework assignments.

делают домашнее задание.

And these would be real homework assignments

И это настоящее домашнее задание,

for a real grade, with a real deadline.

которое надо сдать в срок, за которое получают оценку.

You can see the deadlines and the usage graph.

Посмотрите на сроки и график использования.

These are the spikes showing

Эти скачки показывают,

that procrastination is global phenomenon.

что все студенты тянут до последнего.

(Laughter)

(Смех)

At the end of the course,

В конце курса

the students got a certificate.

студенты получают сертификат.

They could present that certificate

Они могут показать этот сертификат

to a prospective employer and get a better job,

потенциальному работодателю и получить лучшую работу.

and we know many students who did.

Мы знаем много студентов, которые именно это и сделали.

Some students took their certificate

Некоторые студенты взяли свой сертификат

and presented this to an educational institution at which they were enrolled

и показали его в своём учебном заведении,

for actual college credit.

чтобы получить зачёт.

So these students were really getting something meaningful

Так что эти студенты действительно что-то получили,

for their investment of time and effort.

вложив своё время и усилия.

Let's talk a little bit about some of the components

А теперь давайте поговорим о том,

that go into these courses.

из чего состоят наши курсы.

The first component is that when you move away

Во-первых, когда вы уходите

from the constraints of a physical classroom

от ограничений физической классной комнаты

and design content explicitly for an online format,

и создаёте курс в формате онлайн,

you can break away from, for example,

вы можете полностью отойти, например,

the monolithic one-hour lecture.

от монолитной часовой лекции.

You can break up the material, for example,

Вы можете разбить материал, например,

into these short, modular units of eight to 12 minutes,

на короткие модули по 8-12 минут,

each of which represents a coherent concept.

каждый из который посвящён одному понятию или идее.

Students can traverse this material in different ways,

Студенты могут осваивать такой материал разными способами,

depending on their background, their skills or their interests.

в зависимости от своих знаний, навыков или интересов.

So, for example, some students might benefit

Например, некоторым студентам может понадобиться

from a little bit of preparatory material

подготовительный материал,

that other students might already have.

который другие студенты уже знают.

Other students might be interested in a particular

А другим студентам нужно

enrichment topic that they want to pursue individually.

больше материала посложнее для самостоятельного изучения.

So this format allows us to break away

Так что такой формат позволяет уйти

from the one-size-fits-all model of education,

от «одной на всех» модели образования,

and allows students to follow a much more personalized curriculum.

дать студентам возможность индивидуализированного обучения.

Of course, we all know as educators

Конечно, как преподаватели, все мы знаем,

that students don't learn by sitting and passively watching videos.

что студенты мало чему научатся, если будут просто сидеть и смотреть видео.

Perhaps one of the biggest components of this effort

Возможно, один из важнейших компонентов —

is that we need to have students

это возможность

who practice with the material

практической работы с материалом,

in order to really understand it.

чтобы действительно понять его.

There's been a range of studies that demonstrate the importance of this.

Ряд исследований показывают важность практической работы.

This one that appeared in Science last year, for example,

Это исследование из журнала «Science» прошлого года

demonstrates that even simple retrieval practice,

показывает, что даже простые упражнения,

where students are just supposed to repeat

где студенты просто повторяют то,

what they already learned

что они изучили,

gives considerably improved results

значительно улучшают результаты

on various achievement tests down the line

различных тестов успеваемости

than many other educational interventions.

по сравнению с другими мероприятиями.

We've tried to build in retrieval practice into the platform,

Мы попытались встроить упражнения повторения в нашу платформу,

as well as other forms of practice in many ways.

а также внедрили другие практические упражнения.

For example, even our videos are not just videos.

Например, наши видео — это не просто видео.

Every few minutes, the video pauses

Каждые несколько минут видео останавливается,

and the students get asked a question.

чтобы студенты могли ответить на вопрос.

(Video) SP: ... These four things. Prospect theory, hyperbolic discounting,

(Видео) С.П.: «Эти четыре вещи. Теория перспектив, гиперболическое дисконтирование,

status quo bias, base rate bias. They're all well documented.

априорные предубеждения — всё это подробно описано.

So they're all well documented deviations from rational behavior.

Это подробно описанные отклонения от рационального поведения».

DK: So here the video pauses,

Здесь видео приостанавливается,

and the student types in the answer into the box

студенты пишут свои ответы

and submits. Obviously they weren't paying attention.

и отсылают их. Видно, что они всё пропустили, да?

(Laughter)

(Смех)

So they get to try again,

Поэтому они пытаются ещё раз,

and this time they got it right.

и на этот раз у них получилось.

There's an optional explanation if they want.

Если нужно, они могут почитать разъяснение.

And now the video moves on to the next part of the lecture.

После этого мы переходим к следующей части лекции.

This is a kind of simple question

Вот это достаточно простой вопрос,

that I as an instructor might ask in class,

который я как инструктор могу задать классу,

but when I ask that kind of a question in class,

но когда я задаю такие вопросы в классе,

80 percent of the students

80% студентов

are still scribbling the last thing I said,

продолжают записывать мои последние слова,

15 percent are zoned out on Facebook,

15% сидят в Facebook,

and then there's the smarty pants in the front row

и остаётся парочка умников в первом ряду,

who blurts out the answer

которые отвечают до того,

before anyone else has had a chance to think about it,

как остальные начали думать над вопросом.

and I as the instructor am terribly gratified

А я ужасно рада,

that somebody actually knew the answer.

что хоть кто-то знает ответ.

And so the lecture moves on before, really,

Так что лекция продолжается,

most of the students have even noticed that a question had been asked.

несмотря на то, что большинство студентов и не заметило, что был задан вопрос.

Here, every single student

Здесь же каждый студент

has to engage with the material.

должен работать с материалом.

And of course these simple retrieval questions

И, конечно, простые вопросы на повторение —

are not the end of the story.

это ещё не конец.

One needs to build in much more meaningful practice questions,

Необходимо включить более осмысленные практические задания,

and one also needs to provide the students with feedback

необходимо также обеспечить обратную связь

on those questions.

на основе этих заданий.

Now, how do you grade the work of 100,000 students

А как проверять работы 100 000 студентов,

if you do not have 10,000 TAs?

не имея 10 000 помощников?

The answer is, you need to use technology

Нужно использовать технологии,

to do it for you.

которые будут это делать за вас.

Now, fortunately, technology has come a long way,

Теперь, к счастью, технологии прошли долгий путь развития,

and we can now grade a range of interesting types of homework.

и мы можем проверять домашние задания разных интересных типов.

In addition to multiple choice

Помимо заданий с вариантами ответов,

and the kinds of short answer questions that you saw in the video,

и вопросов с краткими свободными ответами, как на видео,

we can also grade math, mathematical expressions

мы можем проверять задания по математике, с алгебраическими выражениями,

as well as mathematical derivations.

а также с выводом формул и доказательствами.

We can grade models, whether it's

Мы можем проверять правильность моделей, будь то

financial models in a business class

финансовые модели из курса по бизнесу

or physical models in a science or engineering class

или физические модели из курсов по науке и технике.

and we can grade some pretty sophisticated programming assignments.

Мы также можем проверять довольно сложные задания по программированию.

Let me show you one that's actually pretty simple

Позвольте мне показать вам один довольно простой,

but fairly visual.

но наглядный пример.

This is from Stanford's Computer Science 101 class,

Из курса информатики Стэнфордского университета.

and the students are supposed to color-correct

Студенты должны исправить цвета

that blurry red image.

вот в этом размытом красном изображении.

They're typing their program into the browser,

Они набирают свои программы прямо в окне браузера,

and you can see they didn't get it quite right, Lady Liberty is still seasick.

Тут ещё что-то не так — леди Либерти по-прежнему тошнит.

And so, the student tries again, and now they got it right, and they're told that,

Тогда пытаются ещё раз, и когда всё правильно, им это сообщают,

and they can move on to the next assignment.

и они могут перейти к следующему заданию.

This ability to interact actively with the material

Эта возможность активно работать с материалом

and be told when you're right or wrong

и знать, когда вы решили правильно или неправильно,

is really essential to student learning.

очень важна в обучении.

Now, of course we cannot yet grade

Конечно, мы пока не можем проверять

the range of work that one needs for all courses.

работы любого типа, необходимые для любых курсов.

Specifically, what's lacking is the kind of critical thinking work

В частности, у нас нет возможности проверять задания для критического мышления,

that is so essential in such disciplines

которые важны в гуманитарных дисциплинах,

as the humanities, the social sciences, business and others.

в социальных науках, бизнесе и т.д.

So we tried to convince, for example,

Поэтому мы пытались убедить

some of our humanities faculty

наших профессоров-гуманитариев,

that multiple choice was not such a bad strategy.

что задания с вариантами ответов — не такая плохая стратегия.

That didn't go over really well.

У нас не особо получилось.

So we had to come up with a different solution.

Поэтому нам пришлось придумать другое решение.

And the solution we ended up using is peer grading.

В конечном итоге мы решили, что люди будут проверять друг друга.

It turns out that previous studies show,

Как выяснилось, исследования показывают,

like this one by Saddler and Good,

например, вот это, проведённое Сэдлером и Гудом,

that peer grading is a surprisingly effective strategy

что оценивание друг друга — удивительно эффективный метод

for providing reproducible grades.

для обеспечения стабильности оценок.

It was tried only in small classes,

Эта стратегия была опробована лишь в маленьких классах,

but there it showed, for example,

но в них было показано, например,

that these student-assigned grades on the y-axis

что оценки, выставленные студентами друг другу (на оси Y)

are actually very well correlated

очень совпадают

with the teacher-assigned grade on the x-axis.

с оценками учителя (на оси X).

What's even more surprising is that self-grades,

Ещё удивительнее то, что оценки самим себе,

where the students grade their own work critically --

когда студенты оценивают собственные работы,

so long as you incentivize them properly

если поставить их в условия,

so they can't give themselves a perfect score --

где они не могут всё время давать себя высший балл,

are actually even better correlated with the teacher grades.

ещё лучше коррелируют с оценками учителя.

And so this is an effective strategy

Так что это эффективный подход,

that can be used for grading at scale,

который можно использовать для массовой проверки домашних заданий.

and is also a useful learning strategy for the students,

Это также полезно для учебы,

because they actually learn from the experience.

потому что студенты учатся на основе опыта.

So we now have the largest peer-grading pipeline ever devised,

И теперь у нас есть крупнейший канал взаимной проверки домашних работ,

where tens of thousands of students

где десятки тысяч студентов

are grading each other's work,

проверяют работы друг друга,

and quite successfully, I have to say.

и довольно успешно, должна вам сказать.

But this is not just about students

Это касается не только студентов,

sitting alone in their living room working through problems.

работающих в одиночку в тишине своей квартиры.

Around each one of our courses,

В каждом из наших курсов

a community of students had formed,

сложилось сообщество студентов,

a global community of people

глобальное сообщество людей

around a shared intellectual endeavor.

вокруг общего интеллектуального занятия.

What you see here is a self-generated map

Вот здесь показана карта,

from students in our Princeton Sociology 101 course,

от студентов начального курса социологии из Принстонского университета.

where they have put themselves on a world map,

Они отметили на карте, кто откуда.

and you can really see the global reach of this kind of effort.

Тут действительно виден глобальный размах всего этого предприятия.

Students collaborated in these courses in a variety of different ways.

Студенты сотрудничают различными способами.

First of all, there was a question and answer forum,

Во-первых, существует форум вопросов и ответов,

where students would pose questions,

где одни студенты могут задать вопрос,

and other students would answer those questions.

а другие на них ответят.

And the really amazing thing is,

И это просто удивительно,

because there were so many students,

так как когда студентов так много,

it means that even if a student posed a question

то даже если вопрос задан

at 3 o'clock in the morning,

в 3 часа ночи,

somewhere around the world,

в какой-то точке земного шара

there would be somebody who was awake

обязательно найдётся кто-то, кто не спит

and working on the same problem.

и работает над той же задачей.

And so, in many of our courses,

Так что во многих наших курсах

the median response time for a question

среднее время реакции на вопрос

on the question and answer forum was 22 minutes.

на форуме — 22 минуты.

Which is not a level of service I have ever offered to my Stanford students.

Явно отличается от того, что я могла когда-либо предложить своим студентам в Стэнфорде.

(Laughter)

(Смех)

And you can see from the student testimonials

И если посмотреть на отзывы студентов,

that students actually find

то видно, что они могут,

that because of this large online community,

в силу большого размера нашего интернет-сообщества,

they got to interact with each other in many ways

взаимодействовать друг с другом больше

that were deeper than they did in the context of the physical classroom.

и глубже, чем они могли бы в обычном классе.

Students also self-assembled,

Студенты также организуются,

without any kind of intervention from us,

без нашего вмешательства,

into small study groups.

в небольшие группы помощи.

Some of these were physical study groups

Благодаря географическому положению,

along geographical constraints

некоторые группы работали лицом к лицу.

and met on a weekly basis to work through problem sets.

Они встречались еженедельно, чтобы вместе работать над заданиями.

This is the San Francisco study group,

Вот группа из Сан-Франциско.

but there were ones all over the world.

И такие группы создавались по всему миру.

Others were virtual study groups,

Другие группы были виртуальными,

sometimes along language lines or along cultural lines,

созданными на основе общности языка или культуры.

and on the bottom left there,

И, наконец, внизу слева

you see our multicultural universal study group

вы видите многокультурную универсальную группу,

where people explicitly wanted to connect

где люди целенаправленно хотели связаться

with people from other cultures.

с людьми других культур.

There are some tremendous opportunities

Такого рода модели

to be had from this kind of framework.

предоставляют нам огромные возможности.

The first is that it has the potential of giving us

Во-первых, это беспрецедентная возможность

a completely unprecedented look

по-другому взглянуть на то,

into understanding human learning.

как мы понимаем процессы человеческого обучения.

Because the data that we can collect here is unique.

Поскольку мы можем собрать уникальные данные.

You can collect every click, every homework submission,

Можно зафиксировать каждый клик, каждое домашнее задание,

every forum post from tens of thousands of students.

каждое сообщение на форуме от десятков тысяч студентов.

So you can turn the study of human learning

Так что изучение процессов обучения

from the hypothesis-driven mode

отходит от тестирования гипотез

to the data-driven mode, a transformation that,

и превращается в формулирование выводов на основе данных.

for example, has revolutionized biology.

Подобная трансформация совершила революцию в биологии.

You can use these data to understand fundamental questions

Имеющиеся данные могут использоваться для ответов на фундаментальные вопросы,

like, what are good learning strategies

такие как «Какие методы обучения хороши?»

that are effective versus ones that are not?

и «Как отличить эффективные методы от неэффективных?»

And in the context of particular courses,

В контексте конкретных курсов

you can ask questions

можно задавать такие вопросы,

like, what are some of the misconceptions that are more common

как «Что студенты не понимают чаще всего?»

and how do we help students fix them?

и «Как мы можем помочь им понять?»

So here's an example of that,

Вот пример.

also from Andrew's Machine Learning class.

Он также из класса Эндрю по компьютерному обучению.

This is a distribution of wrong answers

Это распределение неправильных ответов

to one of Andrew's assignments.

на одно из заданий.

The answers happen to be pairs of numbers,

Ответы — это пары чисел,

so you can draw them on this two-dimensional plot.

поэтому их можно изобразить на этом двухмерном графике.

Each of the little crosses that you see is a different wrong answer.

Каждый маленький крестик — один неправильный ответ.

The big cross at the top left

Вот этот большой крест наверху слева —

is where 2,000 students

это 2000 студентов,

gave the exact same wrong answer.

давших один и тот же неправильный ответ.

Now, if two students in a class of 100

Таким образом, если два студента в классе из ста

give the same wrong answer,

дали один и тот же неправильный ответ,

you would never notice.

вы, может, никогда и не заметили бы.

But when 2,000 students give the same wrong answer,

Но если 2000 студентов дали один и тот же неправильный ответ,

it's kind of hard to miss.

это трудно не заметить.

So Andrew and his students went in,

Эндрю со своими студентами

looked at some of those assignments,

изучили эти домашние задания,

understood the root cause of the misconception,

чтобы выяснить, в чём же корень непонимания,

and then they produced a targeted error message

и сгенерировали сообщение об ошибке,

that would be provided to every student

которое адресовано всем студентам

whose answer fell into that bucket,

из этой группы несправившихся.

which means that students who made that same mistake

Все, кто совершил ту же самую ошибку,

would now get personalized feedback

теперь получат сообщение,

telling them how to fix their misconception much more effectively.

которое объяснит им, как лучше справиться с непониманием.

So this personalization is something that one can then build

Такая персонализация — это то, что можно сделать

by having the virtue of large numbers.

благодаря наличию большого количества данных.

Personalization is perhaps

Персонализация — это, пожалуй,

one of the biggest opportunities here as well,

одна из самых больших возможностей таких курсов,

because it provides us with the potential

потому что она даёт нам шанс

of solving a 30-year-old problem.

решить проблему 30-летней давности.

Educational researcher Benjamin Bloom, in 1984,

Исследователь образования Бенджамин Блум в 1984 году

posed what's called the 2 sigma problem,

сформулировал то, что называется проблемой двух сигм,

which he observed by studying three populations.

которую он увидел, изучая три группы студентов.

The first is the population that studied in a lecture-based classroom.

Первая группа — студенты, которые учатся по лекциям.

The second is a population of students that studied

Вторая — студенты,

using a standard lecture-based classroom,

которые тоже слушают лекции,

but with a mastery-based approach,

но освоение материала регулярно проверяется,

so the students couldn't move on to the next topic

т.е. они не могут перейти к следующей теме

before demonstrating mastery of the previous one.

до тех пор, пока не покажут, что освоили текущую тему.

And finally, there was a population of students

И, наконец, третья группа —

that were taught in a one-on-one instruction using a tutor.

они обучаются индивидуально, один на один с учителем.

The mastery-based population was a full standard deviation,

Оценки во второй группе (контроль за освоением материала)

or sigma, in achievement scores better

отличались на среднеквадратичное отклонение, или сигму, от оценок

than the standard lecture-based class,

в первой группе (традиционная лекция),

and the individual tutoring gives you 2 sigma

а индивидуальное обучение дало 2 сигмы

improvement in performance.

в улучшении оценок.

To understand what that means,

Чтобы понять, что это значит,

let's look at the lecture-based classroom,

давайте посмотрим на класс с лекциями,

and let's pick the median performance as a threshold.

выберем медиану в оценках в качестве порога.

So in a lecture-based class,

Итак, в классе с лекциями

half the students are above that level and half are below.

половина студентов лучше этой величины, а половина — хуже.

In the individual tutoring instruction,

В классе с индивидуальным обучением

98 percent of the students are going to be above that threshold.

98% студентов будут лучше этой середины.

Imagine if we could teach so that 98 percent of our students

Представьте, если мы могли бы обучать так, чтобы 98% наших студентов

would be above average.

были выше среднего.

Hence, the 2 sigma problem.

Мы имеем проблему двух сигм,

Because we cannot afford, as a society,

потому что как общество мы не можем

to provide every student with an individual human tutor.

обеспечить каждого студента индивидуальным наставником.

But maybe we can afford to provide each student

Но, может, мы можем дать каждому студенту

with a computer or a smartphone.

компьютер или смартфон.

So the question is, how can we use technology

Тогда вопрос в том, как мы можем использовать технологии,

to push from the left side of the graph, from the blue curve,

чтобы сместить результат с левой стороны от голубой кривой

to the right side with the green curve?

к правой стороне, к зелёной кривой?

Mastery is easy to achieve using a computer,

Освоение материала становится проще с помощью компьютера,

because a computer doesn't get tired

потому что компьютеры не устают

of showing you the same video five times.

показывать вам то же самое видео пять раз.

And it doesn't even get tired of grading the same work multiple times,

Они даже не устают проверять те же задания по многу раз.

we've seen that in many of the examples that I've shown you.

Это видно из многих примеров, которые я вам показала.

And even personalization

И даже персонализация —

is something that we're starting to see the beginnings of,

это то, начало чего мы здесь видим,

whether it's via the personalized trajectory through the curriculum

будь то персонализированная подача материала

or some of the personalized feedback that we've shown you.

или целенаправленные комментарии и сообщения об ошибках.

So the goal here is to try and push,

То есть наша цель — попытаться подтолкнуть всех

and see how far we can get towards the green curve.

и посмотреть, насколько мы сможем приблизиться к зелёной кривой.

So, if this is so great, are universities now obsolete?

И если всё так замечательно, значит, обычные университеты устарели?

Well, Mark Twain certainly thought so.

Марк Твен точно так думал.

He said that, "College is a place where a professor's lecture notes

Он сказал: «Колледж — это место, где конспекты профессора

go straight to the students' lecture notes,

попадают прямо в конспекты студентов,

without passing through the brains of either."

не проходя через мозг того или другого».

(Laughter)

(Смех)

I beg to differ with Mark Twain, though.

Осмелюсь не согласиться с Марком Твеном.

I think what he was complaining about is not

Я думаю, что то, на что он жаловался,

universities but rather the lecture-based format

это не университеты, а, скорее, формат лекций,

that so many universities spend so much time on.

который многие университеты часто используют.

So let's go back even further, to Plutarch,

Давайте обратимся ещё дальше в прошлое, к Плутарху.

who said that, "The mind is not a vessel that needs filling,

Он говорил: «Ум — это не сосуд, который нужно наполнить,

but wood that needs igniting."

а дрова, которые нужно поджечь».

And maybe we should spend less time at universities

Возможно, нам нужно тратить меньше времени

filling our students' minds with content

на заполнение умов студентов на лекциях,

by lecturing at them, and more time igniting their creativity,

а больше на развитие их творческого начала,

their imagination and their problem-solving skills

их воображения и навыков решения проблем

by actually talking with them.

путем общения.

So how do we do that?

Как же это сделать?

We do that by doing active learning in the classroom.

Мы это делаем путём активного обучения.

So there's been many studies, including this one,

Было много исследований, включая вот это,

that show that if you use active learning,

которое показывает, что активное обучение

interacting with your students in the classroom,

и взаимодействие со студентами

performance improves on every single metric --

улучшают их успеваемость по каждому параметру —

on attendance, on engagement and on learning

по посещаемости, вовлечённости и непосредственно знаниям,

as measured by a standardized test.

что измеряется стандартизированными тестами.

You can see, for example, that the achievement score

Видите, например, вот тут оценка успеваемости

almost doubles in this particular experiment.

почти удваивается в данном эксперименте.

So maybe this is how we should spend our time at universities.

Может, именно так надо проводить время в университетах.

So to summarize, if we could offer a top quality education

Итак, если мы могли бы предложить высокое качество образования

to everyone around the world for free,

всем во всём мире и бесплатно,

what would that do? Three things.

что бы из этого получилось? Три вещи.

First it would establish education as a fundamental human right,

Во-первых, образование стало бы основным правом человека,

where anyone around the world

где каждый в любой точке земного шара

with the ability and the motivation

со способностями и желанием

could get the skills that they need

мог бы приобрести навыки, необходимые

to make a better life for themselves,

для обеспечения лучшей жизни,

their families and their communities.

своей, своих близких и людей вокруг.

Second, it would enable lifelong learning.

Во-вторых, это бы обеспечило непрерывное обучение.

It's a shame that for so many people,

Очень жаль, что для многих людей

learning stops when we finish high school or when we finish college.

учёба останавливается по окончании школы или университета.

By having this amazing content be available,

Если все эти замечательные курсы станут доступны,

we would be able to learn something new

мы сможем узнавать что-то новое,

every time we wanted,

когда захотим,

whether it's just to expand our minds

будь то с целью саморазвития

or it's to change our lives.

или изменения нашей жизни.

And finally, this would enable a wave of innovation,

И, наконец, это позволит стимулировать инновации,

because amazing talent can be found anywhere.

потому что выдающиеся таланты есть везде.

Maybe the next Albert Einstein or the next Steve Jobs

Может быть, следующий Эйнштейн или Стив Джобс

is living somewhere in a remote village in Africa.

живёт где-то в отдалённой африканской деревне.

And if we could offer that person an education,

И если бы мы могли предложить им образование,

they would be able to come up with the next big idea

у них появилась бы возможность придумать что-то грандиозное

and make the world a better place for all of us.

и сделать мир лучше для всех нас.

Thank you very much.

Большое спасибо.

(Applause)

(Аплодисменты)