Daphne Koller: What we're learning from online education

Translator: Morton Bast Reviewer: Thu-Huong Ha

Tradutor: Ana Enes Revisora: Mário Canudo

Like many of you, I'm one of the lucky people.

Como muitos de vocês, sou uma pessoa de sorte.

I was born to a family where education was pervasive.

Nasci numa família em que a educação era uma tradição.

I'm a third-generation PhD, a daughter of two academics.

Pertenço à terceira geração de doutorados, filha de dois académicos.

In my childhood, I played around in my father's university lab.

Na minha infância, brincava no laboratório universitário do meu pai.

So it was taken for granted that I attend some of the best universities,

Por isso, era certo que iria frequentar uma das melhores universidades

which in turn opened the door to a world of opportunity.

o que, por sua vez, me abriu a porta para um mundo de oportunidades.

Unfortunately, most of the people in the world are not so lucky.

Infelizmente, a maioria das pessoas não tem tanta sorte.

In some parts of the world, for example, South Africa,

Em algumas partes do mundo, por exemplo, na África do Sul,

education is just not readily accessible.

a educação não está ao alcance de todos.

In South Africa, the educational system was constructed

Na África do Sul, o sistema educativo foi construído

in the days of apartheid for the white minority.

no tempo do Apartheid, para a minoria branca.

And as a consequence, today there is just not enough spots

E, como consequência, hoje em dia, não há vagas suficientes

for the many more people who want and deserve a high quality education.

para todos aqueles que querem e merecem uma educação de excelência.

That scarcity led to a crisis in January of this year

Essa escassez levou a uma crise em janeiro deste ano,

at the University of Johannesburg.

na Universidade de Joanesburgo.

There were a handful of positions left open

Existiam algumas vagas em aberto

from the standard admissions process, and the night before

no processo de admissão, e na noite anterior

they were supposed to open that for registration,

à abertura dessas vagas,

thousands of people lined up outside the gate in a line a mile long,

milhares de pessoas alinharam-se junto ao portão, numa fila enorme de mais de 1,5 km,

hoping to be first in line to get one of those positions.

esperando ser as primeiras e ficar com uma dessas vagas.

When the gates opened, there was a stampede,

Quando os portões abriram, houve um tumulto,

and 20 people were injured and one woman died.

20 pessoas ficaram feridas e uma mulher morreu.

She was a mother who gave her life

Era uma mãe que perdeu a vida

trying to get her son a chance at a better life.

a tentar dar ao seu filho a oportunidade de ter uma vida melhor.

But even in parts of the world like the United States

Mas, mesmo em partes do mundo, como os Estados Unidos,

where education is available, it might not be within reach.

onde a educação é acessível, pode estar fora do alcance.

There has been much discussed in the last few years

Muito se tem discutido, nos últimos anos,

about the rising cost of health care.

sobre o aumento dos custos dos serviços de saúde.

What might not be quite as obvious to people

O que pode não ser tão óbvio para as pessoas

is that during that same period the cost of higher education tuition

é que, durante esse mesmo período, o custo das propinas do ensino superior

has been increasing at almost twice the rate,

aumentou quase ao dobro desse ritmo,

for a total of 559 percent since 1985.

atingindo um total de 559%, desde 1985.

This makes education unaffordable for many people.

Isto torna a educação incomportável para muitas pessoas.

Finally, even for those who do manage to get the higher education,

Finalmente, mesmo para aqueles que conseguem chegar ao ensino superior,

the doors of opportunity might not open.

as portas da oportunidade poderão não abrir.

Only a little over half of recent college graduates

Apenas pouco mais de metade dos recém-formados,

in the United States who get a higher education

nos Estados Unidos, que concluíram o ensino superior,

actually are working in jobs that require that education.

trabalham em empregos que requerem tal nível de educação.

This, of course, is not true for the students

Isto, claro, não é verdade para os estudantes

who graduate from the top institutions,

que se formam em instituições de topo.

but for many others, they do not get the value

Mas, para muitos outros, eles não têm retorno

for their time and their effort.

pelo seu tempo e esforço.

Tom Friedman, in his recent New York Times article,

Tom Friedman, no seu recente artigo no New York Times,

captured, in the way that no one else could, the spirit behind our effort.

captou, de uma forma que mais ninguém conseguiria, o espírito por trás desse esforço.

He said the big breakthroughs are what happen

Ele disse que "as grandes descobertas acontecem quando

when what is suddenly possible meets what is desperately necessary.

"aquilo que é de repente possível vai ao encontro daquilo que é desesperadamente necessário."

I've talked about what's desperately necessary.

Já falei sobre o que é desesperadamente necessário.

Let's talk about what's suddenly possible.

Falemos sobre o que é "de repente possível".

What's suddenly possible was demonstrated by

O que é "de repente possível" foi demonstrado em

three big Stanford classes,

três grandes disciplinas de Stanford,

each of which had an enrollment of 100,000 people or more.

cada uma delas com 100 mil pessoas, ou mais, inscritas.

So to understand this, let's look at one of those classes,

Então, para compreender isso, vamo-nos focar numa dessas disciplinas,

the Machine Learning class offered by my colleague

a disciplina de Aprendizagem Automática, lecionada pelo meu colega

and cofounder Andrew Ng.

e co-fundador Andrew Ng.

Andrew teaches one of the bigger Stanford classes.

O Andrew leciona uma das maiores disciplinas de Stanford.

It's a Machine Learning class,

É a disciplina de Aprendizagem Automática

and it has 400 people enrolled every time it's offered.

que tem 400 pessoas inscritas sempre que é oferecida.

When Andrew taught the Machine Learning class to the general public,

Quando o Andrew lecionou a disciplina de Aprendizagem Automática para o público em geral,

it had 100,000 people registered.

esta teve 100 000 pessoas inscritas.

So to put that number in perspective,

Para colocar esse número em perspetiva,

for Andrew to reach that same size audience

para o Andrew alcançar uma audiência com a mesma dimensão

by teaching a Stanford class,

lecionando a sua disciplina em Stanford,

he would have to do that for 250 years.

ele teria de fazer isso durante 250 anos.

Of course, he'd get really bored.

É claro que ia ficar bastante entediado.

So, having seen the impact of this,

Então, depois de ver o impacto disto,

Andrew and I decided that we needed to really try and scale this up,

o Andrew e eu decidimos que precisávamos realmente de tentar ampliar isso,

to bring the best quality education to as many people as we could.

para proporcionar uma educação de excelência a quantas pessoas pudéssemos.

So we formed Coursera,

Então criámos a Coursera,

whose goal is to take the best courses

cujo objetivo é ter os melhores cursos

from the best instructors at the best universities

dos melhores professores, das melhores universidades

and provide it to everyone around the world for free.

e oferecê-los a todas as pessoas do mundo, gratuitamente.

We currently have 43 courses on the platform

Temos atualmente 43 cursos na plataforma,

from four universities across a range of disciplines,

de quatro universidades, abrangendo várias disciplinas.

and let me show you a little bit of an overview

E deixem-me mostrar uma visão geral dessa plataforma.

of what that looks like.

(Video) Robert Ghrist: Welcome to Calculus.

(Vídeo) Robert Ghrist: "Bem-vindos ao Cálculo."

Ezekiel Emanuel: Fifty million people are uninsured.

Ezekiel Emanuel: "Cinquenta milhões de pessoas não têm seguro."

Scott Page: Models help us design more effective institutions and policies.

Scott Page: "Os modelos ajudam-nos a conceber instituições e políticas mais eficazes.

We get unbelievable segregation.

"Obtemos uma segregação inacreditável."

Scott Klemmer: So Bush imagined that in the future,

Scott Klemmer: "Então Bush imaginou que, no futuro,

you'd wear a camera right in the center of your head.

"usaríamos uma câmara bem no centro da cabeça."

Mitchell Duneier: Mills wants the student of sociology to develop the quality of mind ...

Mitchell Duneier: "Mills quer que o estudante de sociologia desenvolva a qualidade da mente..."

RG: Hanging cable takes on the form of a hyperbolic cosine.

RG:" O cabo suspenso toma a forma de um cosseno hiperbólico."

Nick Parlante: For each pixel in the image, set the red to zero.

Nick Parlante: "Para cada pixel da imagem, defina o vermelho para zero."

Paul Offit: ... Vaccine allowed us to eliminate polio virus.

Paul Offit: "... a vacina permitiu-nos eliminar o vírus da poliomielite."

Dan Jurafsky: Does Lufthansa serve breakfast and San Jose? Well, that sounds funny.

Dan Jurafsky: "A Lufthansa serve o pequeno-almoço e San Jose? Bem, isto soa mal."

Daphne Koller: So this is which coin you pick, and this is the two tosses.

Daphne Koller: "Então esta é a moeda que escolhe, e estes são os dois lançamentos."

Andrew Ng: So in large-scale machine learning, we'd like to come up with computational ...

Andrew Ng: "Na aprendizagem automática em grande escala, gostaríamos de alcançar a computação ..."

(Applause)

(Aplausos)

DK: It turns out, maybe not surprisingly,

Verifica-se, talvez sem surpresa,

that students like getting the best content

que os alunos gostam de receber o melhor conteúdo

from the best universities for free.

das melhores universidades, gratuitamente.

Since we opened the website in February,

Desde que lançámos o "site", em fevereiro,

we now have 640,000 students from 190 countries.

temos agora 640 000 estudantes, de 190 países.

We have 1.5 million enrollments,

Temos 1,5 milhões de inscrições,

6 million quizzes in the 15 classes that have launched

6 milhões de questionários submetidos nas 15 disciplinas oferecidas

so far have been submitted, and 14 million videos have been viewed.

e 14 milhões de visualizações de vídeos.

But it's not just about the numbers,

Mas o que importa não são só os números,

it's also about the people.

são também as pessoas.

Whether it's Akash, who comes from a small town in India

Quer seja o Akash, que vem de uma pequena cidade na Índia

and would never have access in this case

que nunca teria acesso, neste caso,

to a Stanford-quality course

a uma disciplina com qualidade de Stanford

and would never be able to afford it.

nem teria a possibilidades de pagá-la.

Or Jenny, who is a single mother of two

Ou a Jenny, que é mãe solteira de dois filhos

and wants to hone her skills

e quer aumentar as suas competências

so that she can go back and complete her master's degree.

para poder voltar e completar o seu mestrado.

Or Ryan, who can't go to school,

Ou o Ryan, que não pode ir à escola,

because his immune deficient daughter

porque a sua filha imunodeficiente

can't be risked to have germs come into the house,

não pode ser posta em risco por germes trazidos para casa,

so he couldn't leave the house.

por isso ele não pode sair de casa.

I'm really glad to say --

Estou muito contente por poder dizer

recently, we've been in correspondence with Ryan --

— recentemente, estivemos em contato com o Ryan —

that this story had a happy ending.

que esta história teve um final feliz.

Baby Shannon -- you can see her on the left --

A bebé Shannon — que vocês podem ver do lado esquerdo —

is doing much better now,

está muito melhor agora,

and Ryan got a job by taking some of our courses.

e o Ryan arranjou um emprego, após ter frequentado alguns dos nossos cursos.

So what made these courses so different?

Então, o que torna estes cursos tão diferentes?

After all, online course content has been available for a while.

Afinal, cursos "on-line" já existem há algum tempo.

What made it different was that this was real course experience.

O que fez a diferença foi que se tratava de uma experiência real.

It started on a given day,

Começou num dado dia,

and then the students would watch videos on a weekly basis

os alunos passaram a assistir aos vídeos semanalmente

and do homework assignments.

e a fazer os trabalhos de casa.

And these would be real homework assignments

E estes eram trabalhos de casa reais

for a real grade, with a real deadline.

para notas reais e com um prazo de entrega real.

You can see the deadlines and the usage graph.

Podem ver os prazos e a utilização no gráfico.

These are the spikes showing

Estes são os picos mostrando

that procrastination is global phenomenon.

que a procrastinação é um fenómeno global.

(Laughter)

(Risos)

At the end of the course,

No final do curso,

the students got a certificate.

os estudantes obtiveram um certificado.

They could present that certificate

Podiam apresentar esse certificado

to a prospective employer and get a better job,

a um potencial empregador e conseguir um emprego melhor,

and we know many students who did.

e houve muitos que conseguiram.

Some students took their certificate

Alguns estudantes apresentaram o seu certificado

and presented this to an educational institution at which they were enrolled

à instituição universitária em que estavam inscritos

for actual college credit.

para obterem créditos.

So these students were really getting something meaningful

Assim, estes estudantes estavam a receber algo significativo

for their investment of time and effort.

pelo seu investimento de tempo e esforço.

Let's talk a little bit about some of the components

Vamos falar um pouco sobre alguns dos componentes

that go into these courses.

que suportam estes cursos.

The first component is that when you move away

O primeiro componente é que, quando se eliminam

from the constraints of a physical classroom

as limitações físicas da sala de aula

and design content explicitly for an online format,

e se desenvolve conteúdo explicitamente destinado para o formato "on-line",

you can break away from, for example,

podemos libertar-nos, por exemplo,

the monolithic one-hour lecture.

da aula monolítica de uma hora.

You can break up the material, for example,

Podemos fragmentar os conteúdos

into these short, modular units of eight to 12 minutes,

em pequenos módulos de 8 a 12 minutos,

each of which represents a coherent concept.

cada um representando um conceito coerente.

Students can traverse this material in different ways,

Os alunos podem usar este material de diferentes formas,

depending on their background, their skills or their interests.

dependendo dos seus conhecimentos, competências ou interesses.

So, for example, some students might benefit

Assim, por exemplo, alguns alunos podem beneficiar

from a little bit of preparatory material

com materiais preparatórios

that other students might already have.

que outros alunos podem já possuir.

Other students might be interested in a particular

Outros estudantes podem estar interessados

enrichment topic that they want to pursue individually.

num tema específico que queiram estudar individualmente.

So this format allows us to break away

Portanto, este formato permite afastar-nos

from the one-size-fits-all model of education,

do modelo da educação igual para todos

and allows students to follow a much more personalized curriculum.

e permite que os alunos sigam um currículo muito mais personalizado.

Of course, we all know as educators

Todos sabemos, enquanto educadores,

that students don't learn by sitting and passively watching videos.

que os alunos não aprendem estando só sentados a ver os vídeos.

Perhaps one of the biggest components of this effort

Talvez uma das maiores componentes deste projeto

is that we need to have students

seja a necessidade de ter alunos

who practice with the material

que treinem os conteúdos

in order to really understand it.

para verdadeiramente os compreenderem.

There's been a range of studies that demonstrate the importance of this.

Há uma série de estudos que mostram a importância disto.

This one that appeared in Science last year, for example,

Este, que apareceu na Science no ano passado,

demonstrates that even simple retrieval practice,

demonstra que mesmo a simples prática de revisão,

where students are just supposed to repeat

em que os estudantes só precisam repetir

what they already learned

o que eles já aprenderam,

gives considerably improved results

traz resultados consideravelmente melhores

on various achievement tests down the line

em vários testes de desempenho

than many other educational interventions.

do que muitas outras intervenções educativas.

We've tried to build in retrieval practice into the platform,

Tentamos criar a prática da revisão na plataforma,

as well as other forms of practice in many ways.

bem como outras formas de estudo.

For example, even our videos are not just videos.

Por exemplo, até os nossos vídeos não são apenas vídeos,

Every few minutes, the video pauses

Em intervalos de alguns minutos, o vídeo para

and the students get asked a question.

e é feita uma pergunta aos alunos.

(Video) SP: ... These four things. Prospect theory, hyperbolic discounting,

(Vídeo) SP: "... Estas quatro coisas: teoria da decisão, o desconto hiperbólico,

status quo bias, base rate bias. They're all well documented.

"enviesamento do <i>status quo</i>, enviesamento da taxa base, estão todas bem documentadas.

So they're all well documented deviations from rational behavior.

"Então são todos desvios bem documentados do comportamento racional."

DK: So here the video pauses,

DK: Então aqui o vídeo pausa,

and the student types in the answer into the box

e os alunos escrevem a resposta na caixa

and submits. Obviously they weren't paying attention.

e enviam-na. É óbvio que não estavam a prestar atenção.

(Laughter)

(Risos)

So they get to try again,

Então, eles podem tentar de novo

and this time they got it right.

e, desta vez, acertam.

There's an optional explanation if they want.

Se eles quiserem, podem aceder a uma explicação opcional

And now the video moves on to the next part of the lecture.

e agora o vídeo passa à parte seguinte da aula.

This is a kind of simple question

Esta é uma questão simples

that I as an instructor might ask in class,

que eu, enquanto professora, poderia colocar na sala de aula,

but when I ask that kind of a question in class,

mas quando eu coloco este tipo de questões na sala de aula,

80 percent of the students

80% dos alunos

are still scribbling the last thing I said,

ainda estão a escrever a última coisa que eu disse,

15 percent are zoned out on Facebook,

15% estão no Facebook,

and then there's the smarty pants in the front row

e depois há os sabichões da fila da frente

who blurts out the answer

que disparam a resposta

before anyone else has had a chance to think about it,

antes de qualquer outra pessoa ter tido a hipótese de pensar sobre isso.

and I as the instructor am terribly gratified

E eu, como o professora, fico muito satisfeita

that somebody actually knew the answer.

por alguém, pelo menos, saber a resposta.

And so the lecture moves on before, really,

E assim a aula continua antes que, de facto,

most of the students have even noticed that a question had been asked.

a maioria dos alunos tenha reparado que tinha sido feita uma pergunta.

Here, every single student

Aqui, cada um dos estudantes

has to engage with the material.

tem de se envolver com o material.

And of course these simple retrieval questions

E claro, estas perguntas simples de revisão

are not the end of the story.

não são o fim da história.

One needs to build in much more meaningful practice questions,

Precisamos de criar questões práticas muito mais significativas,

and one also needs to provide the students with feedback

além de proporcionar aos alunos retorno

on those questions.

sobre essas questões.

Now, how do you grade the work of 100,000 students

Agora, como se avalia o trabalho de 100 000 estudantes,

if you do not have 10,000 TAs?

se não tivermos 10 mil assistentes técnicos?

The answer is, you need to use technology

A resposta é que é preciso usar a tecnologia

to do it for you.

para que ela o faça por nós.

Now, fortunately, technology has come a long way,

Felizmente, agora que a tecnologia já percorreu um longo caminho,

and we can now grade a range of interesting types of homework.

podemos avaliar vários tipos de trabalhos.

In addition to multiple choice

Além de múltipla escolha

and the kinds of short answer questions that you saw in the video,

e das perguntas de resposta curta que vocês viram no vídeo,

we can also grade math, mathematical expressions

também podemos avaliar matemática, expressões matemáticas

as well as mathematical derivations.

bem como derivações matemáticas.

We can grade models, whether it's

Podemos classificar modelos, quer sejam

financial models in a business class

modelos financeiros numa aula de gestão,

or physical models in a science or engineering class

ou modelos físicos numa aula de ciências ou de engenharia.

and we can grade some pretty sophisticated programming assignments.

E podemos classificar alguns exercícios bastante sofisticados de programação.

Let me show you one that's actually pretty simple

Deixem-me mostrar-vos uma forma que é realmente muito simples

but fairly visual.

mas bastante visual.

This is from Stanford's Computer Science 101 class,

Isto pertence à disciplina de Introdução à Ciência Computacional de Stanford,

and the students are supposed to color-correct

e os alunos devem colorir corretamente a cor

that blurry red image.

daquela imagem vermelha difusa.

They're typing their program into the browser,

Eles estão a escrever o programa no "browser",

and you can see they didn't get it quite right, Lady Liberty is still seasick.

e podemos ver que eles não acertaram: a Estátua da Liberdade ainda está com um ar enjoado.

And so, the student tries again, and now they got it right, and they're told that,

E, assim, o aluno tenta de novo, e agora consegue acertar e

and they can move on to the next assignment.

passar para a próxima atividade.

This ability to interact actively with the material

Esta capacidade de interagir ativamente com o material

and be told when you're right or wrong

e de saber quando se está certo ou errado

is really essential to student learning.

é essencial para a aprendizagem do aluno.

Now, of course we cannot yet grade

Mas, é claro que ainda não podemos avaliar

the range of work that one needs for all courses.

todos os tipos de trabalhos necessários, para todos os cursos.

Specifically, what's lacking is the kind of critical thinking work

Especificamente, o que falta é a avaliação do trabalho de pensamento crítico,

that is so essential in such disciplines

que é tão essencial em disciplinas de

as the humanities, the social sciences, business and others.

humanidades, ciências sociais, gestão e outras.

So we tried to convince, for example,

Então tentámos convencer, por exemplo,

some of our humanities faculty

alguns dos nossos professores de humanidades que

that multiple choice was not such a bad strategy.

as perguntas de múltipla escolha não é uma estratégia assim tão má.

That didn't go over really well.

Isso não deu muito certo.

So we had to come up with a different solution.

Então tivemos de pensar numa solução diferente.

And the solution we ended up using is peer grading.

E a solução a que chegámos foi foi a classificação entre pares.

It turns out that previous studies show,

Acontece que estudos anteriores mostram,

like this one by Saddler and Good,

como este de Saddler e Good,

that peer grading is a surprisingly effective strategy

que a classificação entre pares é uma estratégia surpreendentemente eficaz,

for providing reproducible grades.

por proporcionar notas reproduzíveis.

It was tried only in small classes,

Foi apenas testado em turmas pequenas,

but there it showed, for example,

mas mostrou, por exemplo,

that these student-assigned grades on the y-axis

que estas notas atribuídas pelos alunos (no eixo dos yy)

are actually very well correlated

estão muito bem correlacionadas

with the teacher-assigned grade on the x-axis.

com as notas atribuídas pelos professores (eixo dos xx).

What's even more surprising is that self-grades,

O que é ainda mais surpreendente é que as auto-avaliações,

where the students grade their own work critically --

em que os alunos avaliam o seu próprio trabalho de forma crítica

so long as you incentivize them properly

— desde que incentivados adequadamente

so they can't give themselves a perfect score --

para que não possam atribuir a si próprios a pontuação máxima —

are actually even better correlated with the teacher grades.

estão realmente mais correlacionadas com as classificações dos professores.

And so this is an effective strategy

E por isso esta é uma estratégia eficaz

that can be used for grading at scale,

que pode ser utilizada para avaliações em massa,

and is also a useful learning strategy for the students,

e é também uma estratégia de aprendizagem útil para os alunos,

because they actually learn from the experience.

porque eles realmente aprendem com a experiência.

So we now have the largest peer-grading pipeline ever devised,

Assim, agora temos a maior rede de classificação entre pares já concebida,

where tens of thousands of students

em que dezenas de milhares de estudantes

are grading each other's work,

avaliam os trabalhos uns dos outros,

and quite successfully, I have to say.

e com bastante sucesso, devo dizer.

But this is not just about students

Mas isto não se trata apenas de alunos

sitting alone in their living room working through problems.

sentados sozinhos nas suas salas de estar, a resolver problemas.

Around each one of our courses,

Em torno de cada um dos nossos cursos,

a community of students had formed,

formou-se uma comunidade de estudantes,

a global community of people

uma comunidade global de pessoas

around a shared intellectual endeavor.

ao redor de um esforço intelectual partilhado.

What you see here is a self-generated map

O que veem aqui é um mapa autogerado

from students in our Princeton Sociology 101 course,

dos alunos do nosso curso de Introdução à Sociologia de Princeton,

where they have put themselves on a world map,

onde eles se colocaram no mapa mundo,

and you can really see the global reach of this kind of effort.

e onde podemos realmente ver o alcance global deste tipo de esforço.

Students collaborated in these courses in a variety of different ways.

Os estudantes colaboraram nestes cursos de várias formas.

First of all, there was a question and answer forum,

Primeiro, houve um fórum de perguntas e respostas,

where students would pose questions,

onde os estudantes colocaram questões

and other students would answer those questions.

e outros estudantes responderam a essas questões.

And the really amazing thing is,

E o mais surpreendente é que,

because there were so many students,

porque existiam tantos estudantes,

it means that even if a student posed a question

isso significa que mesmo que um aluno faça uma pergunta

at 3 o'clock in the morning,

às 3 horas da manhã,

somewhere around the world,

nalgum lugar no mundo,

there would be somebody who was awake

haverá alguém acordado

and working on the same problem.

a trabalhar sobre o mesmo problema.

And so, in many of our courses,

E assim, em muitos dos nossos cursos,

the median response time for a question

o tempo médio de resposta a uma pergunta

on the question and answer forum was 22 minutes.

no fórum de perguntas e respostas é de 22 minutos.

Which is not a level of service I have ever offered to my Stanford students.

Longe do nível de serviço que eu posso oferecer aos meus alunos de Stanford.

(Laughter)

(Risos)

And you can see from the student testimonials

E podem ver, a partir dos depoimentos dos estudantes,

that students actually find

que eles acham

that because of this large online community,

que devido a esta grande comunidade "on-line",

they got to interact with each other in many ways

conseguiram interagir uns com os outros de várias formas

that were deeper than they did in the context of the physical classroom.

mais profundas do que as que criavam em salas de aula presenciais.

Students also self-assembled,

Os estudantes também se reuniram,

without any kind of intervention from us,

sem qualquer tipo de intervenção nossa,

into small study groups.

em pequenos grupos de estudo.

Some of these were physical study groups

Alguns destes eram grupos de estudo presenciais

along geographical constraints

com restrições geográficas,

and met on a weekly basis to work through problem sets.

que se reuniram semanalmente para resolverem conjuntos de problemas.

This is the San Francisco study group,

Este é o grupo de estudo de São Francisco,

but there were ones all over the world.

mas havia outros por todo o mundo.

Others were virtual study groups,

Outros eram grupos de estudo virtuais,

sometimes along language lines or along cultural lines,

partilhando, por vezes, a mesma língua ou cultura,

and on the bottom left there,

e na parte inferior esquerda,

you see our multicultural universal study group

vê-se o nosso grupo de estudo multicultural universal,

where people explicitly wanted to connect

em que as pessoas queriam explicitamente contactar

with people from other cultures.

com pessoas de outras culturas.

There are some tremendous opportunities

Existem tremendas oportunidades

to be had from this kind of framework.

a partir deste tipo de enquadramento.

The first is that it has the potential of giving us

A primeira é que ela tem o potencial de nos dar

a completely unprecedented look

uma perspetiva sem precedentes

into understanding human learning.

para compreender a aprendizagem humana.

Because the data that we can collect here is unique.

Porque os dados que podemos recolher aqui são únicos.

You can collect every click, every homework submission,

Vocês podem analisar cada clique, cada entrega de trabalho,

every forum post from tens of thousands of students.

cada mensagem no fórum, de dezenas de milhares de estudantes.

So you can turn the study of human learning

Assim, pode-se transformar o estudo da aprendizagem humana,

from the hypothesis-driven mode

até hoje orientado por hipóteses,

to the data-driven mode, a transformation that,

para um modo baseado em dados, uma transformação

for example, has revolutionized biology.

que, por exemplo, revolucionou a biologia.

You can use these data to understand fundamental questions

Podemos usar estes dados para entender questões fundamentais,

like, what are good learning strategies

como: quais são as boas estratégias de aprendizagem

that are effective versus ones that are not?

que são eficazes <i>versus</i> as que não são?

And in the context of particular courses,

E no contexto de cursos específicos,

you can ask questions

podemos perguntar

like, what are some of the misconceptions that are more common

quais são alguns dos equívocos mais comuns

and how do we help students fix them?

e como podemos ajudar os estudantes a resolvê-los?

So here's an example of that,

Aqui está um exemplo disso,

also from Andrew's Machine Learning class.

também da aula de Aprendizagem Automática do Andrew.

This is a distribution of wrong answers

Trata-se de uma distribuição de respostas erradas

to one of Andrew's assignments.

para um dos exercícios de Andrew.

The answers happen to be pairs of numbers,

As respostas são pares de números,

so you can draw them on this two-dimensional plot.

para que se possam desenhar neste gráfico 2D.

Each of the little crosses that you see is a different wrong answer.

Cada uma das pequenas cruzes que veem é uma resposta errada diferente.

The big cross at the top left

A cruz grande no canto superior esquerdo

is where 2,000 students

representa a pergunta onde 2000 estudantes

gave the exact same wrong answer.

deram exatamente a mesma resposta errada.

Now, if two students in a class of 100

Agora, se dois alunos de uma turma de 100

give the same wrong answer,

dessem a mesma resposta errada,

you would never notice.

nunca se notaria.

But when 2,000 students give the same wrong answer,

Mas, quando 2000 alunos dão a mesma resposta errada,

it's kind of hard to miss.

é um pouco difícil não notar.

So Andrew and his students went in,

Então, quando o Andrew e os seus alunos

looked at some of those assignments,

analisaram alguns dos trabalhos,

understood the root cause of the misconception,

perceberam a causa da falha de entendimento

and then they produced a targeted error message

e criaram uma mensagem de erro

that would be provided to every student

que seria mostrada a todos os alunos

whose answer fell into that bucket,

que tivessem dado aquela resposta,

which means that students who made that same mistake

o que significa que os alunos que fizessem o mesmo erro

would now get personalized feedback

passariam a receber uma mensagem personalizada

telling them how to fix their misconception much more effectively.

ajudando-os a entender o conceito de forma mais eficaz.

So this personalization is something that one can then build

Então esta personalização é algo que se pode construir

by having the virtue of large numbers.

quando temos dados em grande escala.

Personalization is perhaps

A personalização é talvez

one of the biggest opportunities here as well,

uma das maiores oportunidades aqui,

because it provides us with the potential

porque nos dá o potencial de

of solving a 30-year-old problem.

resolver um problema com 30 anos.

Educational researcher Benjamin Bloom, in 1984,

O investigador educacional Benjamin Bloom, em 1984,

posed what's called the 2 sigma problem,

expôs o conhecido problema "2 sigma",

which he observed by studying three populations.

que foi observado ao estudar três populações.

The first is the population that studied in a lecture-based classroom.

A primeira é a população que estudou em sala de aula.

The second is a population of students that studied

A segunda é uma população de alunos que estudou

using a standard lecture-based classroom,

a frequentar uma sala de aula convencional,

but with a mastery-based approach,

mas com uma abordagem baseada no domínio de conteúdo,

so the students couldn't move on to the next topic

de forma a que os alunos não pudessem avançar para o tema seguinte

before demonstrating mastery of the previous one.

sem demonstrarem domínio do precedente.

And finally, there was a population of students

E, finalmente, uma população de estudantes

that were taught in a one-on-one instruction using a tutor.

que foram ensinados de forma individual, recorrendo a um tutor.

The mastery-based population was a full standard deviation,

A população baseada no domínio de conteúdo apresentou um desvio padrão total,

or sigma, in achievement scores better

ou sigma, tendo um melhor desempenho que

than the standard lecture-based class,

a população com aulas tradicionais, em sala de aula.

and the individual tutoring gives you 2 sigma

E a população com aulas individuais, atingiu 2 sigma

improvement in performance.

de melhoria no desempenho.

To understand what that means,

Para percebermos o seu significado,

let's look at the lecture-based classroom,

olhemos para a aprendizagem realizada em sala de aula,

and let's pick the median performance as a threshold.

e tomemos o desempenho médio como limiar.

So in a lecture-based class,

Então, numa sala de aula tradicional,

half the students are above that level and half are below.

metade dos estudantes encontram-se acima desse limiar e a outra metade, abaixo.

In the individual tutoring instruction,

No grupo de ensino individual,

98 percent of the students are going to be above that threshold.

98% dos estudantes ficarão acima desse limiar.

Imagine if we could teach so that 98 percent of our students

Imaginem se pudéssemos ensinar de forma que 98% dos nossos alunos

would be above average.

ficassem acima dessa média.

Hence, the 2 sigma problem.

Por isso, o problema 2 sigma.

Because we cannot afford, as a society,

Porque não podemos proporcionar, enquanto sociedade,

to provide every student with an individual human tutor.

ensino individualizado a todos os alunos.

But maybe we can afford to provide each student

Mas, talvez possamos conceder a cada aluno

with a computer or a smartphone.

um computador ou um smartphone.

So the question is, how can we use technology

Então a questão é, como podemos utilizar a tecnologia

to push from the left side of the graph, from the blue curve,

para mover o lado esquerdo do gráfico, da curva azul,

to the right side with the green curve?

para o lado direito, até à curva verde?

Mastery is easy to achieve using a computer,

O domínio é fácil de alcançar utilizando um computador,

because a computer doesn't get tired

porque o computador não se cansa

of showing you the same video five times.

de mostrar o mesmo video cinco vezes.

And it doesn't even get tired of grading the same work multiple times,

Ele não fica cansado de corrigir o mesmo trabalho diversas vezes,

we've seen that in many of the examples that I've shown you.

tal como vimos em vários exemplos que vos mostrei.

And even personalization

E mesmo a personalização

is something that we're starting to see the beginnings of,

é algo em que já se vê o início,

whether it's via the personalized trajectory through the curriculum

quer através da personalização do currículo

or some of the personalized feedback that we've shown you.

ou através do retorno para cada aluno que já vos mostrei.

So the goal here is to try and push,

Então, o objetivo aqui é tentar impulsionar,

and see how far we can get towards the green curve.

e ver o quão perto da curva verde conseguimos chegar.

So, if this is so great, are universities now obsolete?

Então, se isto é tão fantástico, estarão as universidades obsoletas?

Well, Mark Twain certainly thought so.

Bem, Mark Twain pensou isso.

He said that, "College is a place where a professor's lecture notes

Ele afirmou que "A universidade é o lugar onde as anotações de aula dos professores

go straight to the students' lecture notes,

"vão diretamente para as anotações de aulas dos alunos,

without passing through the brains of either."

"sem passarem pelos cérebros de ambos."

(Laughter)

(Risos)

I beg to differ with Mark Twain, though.

No entanto, eu discordo de Mark Twain.

I think what he was complaining about is not

Penso que ele não se queixava

universities but rather the lecture-based format

das universidades, mas sim do formato baseado na palestra

that so many universities spend so much time on.

em que muitas universidades gastam tanto tempo.

So let's go back even further, to Plutarch,

Voltemos ainda mais atrás: a Plutarco,

who said that, "The mind is not a vessel that needs filling,

que disse que: "A mente não é um recipiente que precisa de ser enchido,

but wood that needs igniting."

"mas madeira que precisa de ser inflamada."

And maybe we should spend less time at universities

E talvez devessemos passar menos tempo nas universidade,

filling our students' minds with content

a encher as mentes dos alunos com conteúdos

by lecturing at them, and more time igniting their creativity,

através de aulas tradicionais, e mais tempo a inflamar a sua criatividade,

their imagination and their problem-solving skills

a sua imaginação e as suas competências de resolução de problemas

by actually talking with them.

conversando, realmente, com eles.

So how do we do that?

Então, como fazemos isso?

We do that by doing active learning in the classroom.

Fazemos isso através da aprendizagem ativa em sala de aula.

So there's been many studies, including this one,

Têm-se desenvolvido muitos estudos, incluindo este,

that show that if you use active learning,

que mostram que se a aprendizagem ativa for utilizada,

interacting with your students in the classroom,

interagindo com os estudantes na sala de aula,

performance improves on every single metric --

o desempenho melhora em quase todas as métricas

on attendance, on engagement and on learning

— na assiduidade, no compromisso e na aprendizagem,

as measured by a standardized test.

como foi aferido através de testes padronizados.

You can see, for example, that the achievement score

Podem verificar, por exemplo, que o resultado de desempenho obtido

almost doubles in this particular experiment.

quase que duplica nesta experiência.

So maybe this is how we should spend our time at universities.

Então, talvez seja desta forma que devemos utilizar o nosso tempo nas universidades.

So to summarize, if we could offer a top quality education

Resumindo, se pudéssemos oferecer uma educação de qualidade

to everyone around the world for free,

a todas as pessoas do mundo, gratuitamente,

what would that do? Three things.

o que aconteceria? Três coisas.

First it would establish education as a fundamental human right,

Primeiro, estabelecer-se-ia a educação como um dos direitos humanos fundamentais,

where anyone around the world

em que qualquer pessoa, em qualquer parte do mundo,

with the ability and the motivation

com capacidade e motivação,

could get the skills that they need

pudesse obter as competências necessárias

to make a better life for themselves,

para tornar a vida melhor para si,

their families and their communities.

para as suas famílias e as suas comunidades.

Second, it would enable lifelong learning.

Segundo, permitiria a aprendizagem ao longo da vida.

It's a shame that for so many people,

É uma vergonha que para tanta gente,

learning stops when we finish high school or when we finish college.

a aprendizagem acabe quando termina o ensino secundário ou a faculdade.

By having this amazing content be available,

O facto destes incríveis conteúdos estarem disponíveis,

we would be able to learn something new

permite-nos aprender algo de novo

every time we wanted,

sempre que quisermos,

whether it's just to expand our minds

seja apenas para expandir a nossa mente

or it's to change our lives.

ou mesmo para mudar as nossas vidas.

And finally, this would enable a wave of innovation,

E, finalmente, permitiria criar uma onda de inovação,

because amazing talent can be found anywhere.

porque talentos surpreendentes podem ser encontrados em qualquer lugar.

Maybe the next Albert Einstein or the next Steve Jobs

Talvez o próximo Albert Einstein ou o próximo Steve Jobs

is living somewhere in a remote village in Africa.

estejam a viver numa vila remota de África.

And if we could offer that person an education,

E se pudermos proporcionar a essas pessoas educação,

they would be able to come up with the next big idea

eles surgirão com a próxima grande ideia

and make the world a better place for all of us.

e tornarão o planeta um lugar melhor para todos nós.

Thank you very much.

Muito obrigada.

(Applause)

(Aplausos)