Daphne Koller: What we're learning from online education

Translator: Morton Bast Reviewer: Thu-Huong Ha

Prevoditelj: Marin Stojic Recezent: SIBELA KESAC

Like many of you, I'm one of the lucky people.

Poput većine vas i ja sam imala sreću.

I was born to a family where education was pervasive.

Rođena sam u obitelji u kojoj je prevladavalo obrazovanje.

I'm a third-generation PhD, a daughter of two academics.

Doktor sam znanosti treće generacije u obitelji i kćer sam dva roditelja akademika.

In my childhood, I played around in my father's university lab.

Tijekom djetinjstva sam se igrala u očevom sveučilišnom laboratoriju.

So it was taken for granted that I attend some of the best universities,

Stoga je uzeto zdravo za gotovo da pohađam neka od najboljih sveučilišta,

which in turn opened the door to a world of opportunity.

što je otvorilo vrata velikom broju mogućnosti.

Unfortunately, most of the people in the world are not so lucky.

Nažalost, većina ljudi u svijetu nemaju takvu sreću.

In some parts of the world, for example, South Africa,

U nekim dijelovima svijeta, npr. u Južnoj Africi,

education is just not readily accessible.

obrazovanje nije lako dostupno.

In South Africa, the educational system was constructed

U Južnoj Africi je obrazovni sustav konstruiran tijekom

in the days of apartheid for the white minority.

vremena Apartheida, te je bio namijenjen za manjinu bijelaca.

And as a consequence, today there is just not enough spots

Kao posljedica toga, danas jednostavno nema dovoljno mjesta

for the many more people who want and deserve a high quality education.

za većinu ostalih ljudi koji žele i koji zaslužuju visoko kvalitetno obrazovanje.

That scarcity led to a crisis in January of this year

Takva nestašica je dovela do krizne situacije u siječnju ove godine

at the University of Johannesburg.

na sveučilištu u Johannesburgu.

There were a handful of positions left open

Nekoliko mjesta je ostalo otvoreno

from the standard admissions process, and the night before

nakon uobičajenog postupka prijava, i noć prije

they were supposed to open that for registration,

nego što su trebali započeti sa primanjem prijava,

thousands of people lined up outside the gate in a line a mile long,

tisuće ljudi se naguralo pred vratima u redu dugačkom skoro 2 km,

hoping to be first in line to get one of those positions.

nadajući se da će biti među onima koji će dobiti mjesto na sveučilištu.

When the gates opened, there was a stampede,

Kada su se otvorila vrata, nastao je stampedo i

and 20 people were injured and one woman died.

20 ljudi je ozlijeđeno a jedna žena je poginula.

She was a mother who gave her life

To je bila majka koja je dala svoj život

trying to get her son a chance at a better life.

pokušavajući osigurati svom sinu priliku za boljim životom.

But even in parts of the world like the United States

No čak i u dijelovima svijeta poput SAD-a

where education is available, it might not be within reach.

gdje je obrazovanje dostupno, ne mora biti unutar dosega.

There has been much discussed in the last few years

Puno je bilo rasprava posljednjih godina

about the rising cost of health care.

na temu rastućih troškova zdravstvene skrbi.

What might not be quite as obvious to people

Ono što možda nije toliko istaknuto

is that during that same period the cost of higher education tuition

je da su se tijekom tog istog perioda troškovi školarina u visokom obrazovanju

has been increasing at almost twice the rate,

povećali skoro dvostruko brže,

for a total of 559 percent since 1985.

rezultirajući ukupnim povećanjem u iznosu od 559% od 1985. godine.

This makes education unaffordable for many people.

To čini obrazovanje preskupim za većinu ljudi.

Finally, even for those who do manage to get the higher education,

Konačno, čak i oni koji uspiju doći do visokog obrazovanja

the doors of opportunity might not open.

možda nikada ne dobiju otvorena vrata za brojne prilike.

Only a little over half of recent college graduates

Tek nešto preko polovice svježe diplomiranih studenata

in the United States who get a higher education

u SAD-u koji su visoko obrazovani

actually are working in jobs that require that education.

ustvari i rade na poslovima koji to zahtijevaju.

This, of course, is not true for the students

Naravno, to nije slučaj sa studentima

who graduate from the top institutions,

koji su diplomirali na najboljim sveučilištima,

but for many others, they do not get the value

ali većina drugih studenata ne dobiva jednaku povratnu vrijednost

for their time and their effort.

za svoje uloženo vrijeme i trud.

Tom Friedman, in his recent New York Times article,

Tom Friedman je u svom nedavno napisanom članku za New York Times

captured, in the way that no one else could, the spirit behind our effort.

prikazao duh onoga što mi činimo, bolje nego što bi to itko drugi mogao prikazati.

He said the big breakthroughs are what happen

Rekao je kako su veliki napretci ono što se dešava

when what is suddenly possible meets what is desperately necessary.

kada se ujedini ono što je postalo moguće sa onime što je očajno potrebno.

I've talked about what's desperately necessary.

Dosada sam govorila o onome što je očajno potrebno.

Let's talk about what's suddenly possible.

Pričajmo sada o onome što je postalo moguće.

What's suddenly possible was demonstrated by

Ono što je sada odjednom postalo moguće najbolje ilustriraju

three big Stanford classes,

tri opsežna nastavna predmeta sa Stanforda,

each of which had an enrollment of 100,000 people or more.

od kojih je svaki pohađalo po 100 000 i više upisanih ljudi.

So to understand this, let's look at one of those classes,

Da bismo sve to bolje razumjeli, pogledajmo jedan od tih predmeta

the Machine Learning class offered by my colleague

imena "Kako računala uče", a koji predaje moj kolega

and cofounder Andrew Ng.

i suosnivač Andrew Ng.

Andrew teaches one of the bigger Stanford classes.

Andrew predaje jedan od većih nastavnih predmeta na Stanfordu.

It's a Machine Learning class,

To je predmet "Kako računala uče"

and it has 400 people enrolled every time it's offered.

i svaki puta kada se otvore upisi 400 ljudi se prijavljuje na ovaj predmet.

When Andrew taught the Machine Learning class to the general public,

Kada je Andrew predavao "Kako računala uče" javnoj publici

it had 100,000 people registered.

oko 100 000 ljudi je bilo upisano.

So to put that number in perspective,

Kako bismo taj broj stavili u perspektivu,

for Andrew to reach that same size audience

shvatimo da ako bi Andrew htio predavati istom broju studenata

by teaching a Stanford class,

predavanjem na Stanfordu u učionici,

he would have to do that for 250 years.

morao bi predavati 250 godina!

Of course, he'd get really bored.

Naravno, bilo bi mu jako dosadno.

So, having seen the impact of this,

Sada kada smo vidjeli utjecaj svega ovoga,

Andrew and I decided that we needed to really try and scale this up,

Andrew i ja smo odlučili kako sve to moramo dignuti na veću razinu

to bring the best quality education to as many people as we could.

kako bismo omogućili najkvalitetnije obrazovanje što većem mogućem broju ljudi.

So we formed Coursera,

Tako smo osnovali Courseru,

whose goal is to take the best courses

čiji je cilj okupiti najbolje nastavne predmete

from the best instructors at the best universities

od najboljih predavača sa najboljih sveučilišta,

and provide it to everyone around the world for free.

i to besplatno ponuditi svima u svijetu!

We currently have 43 courses on the platform

Trenutno u našem sustavu imamo 43 predmeta

from four universities across a range of disciplines,

sa četiri sveučilišta u različitim znanstvenim disciplinama,

and let me show you a little bit of an overview

pa mi dopustite da vam ukratko pokažem sažetak

of what that looks like.

kako to sve izgleda.

(Video) Robert Ghrist: Welcome to Calculus.

"Dobrodošli u računanje!"

Ezekiel Emanuel: Fifty million people are uninsured.

"50 milijuna ljudi je neosigurano..."

Scott Page: Models help us design more effective institutions and policies.

"Ovi modeli nam pomažu da konstruiramo učinkovitije institucije i načela..."

We get unbelievable segregation.

"Postoji nevjerojatna segregacija..."

Scott Klemmer: So Bush imagined that in the future,

"Pa je tako Bush zamislio da ćete u budućnosti

you'd wear a camera right in the center of your head.

nositi video kameru posred svog čela..."

Mitchell Duneier: Mills wants the student of sociology to develop the quality of mind ...

"Mills želi od studenata sociologije da razviju kvalitetu razmišljanja..."

RG: Hanging cable takes on the form of a hyperbolic cosine.

"Viseći kablovi poprimaju oblik hiperbolnog kosinusa..."

Nick Parlante: For each pixel in the image, set the red to zero.

"Za svaki piksel na slici, postavite crvenu na 0..."

Paul Offit: ... Vaccine allowed us to eliminate polio virus.

"...cjepivo nam je omogućilo da iskorijenimo virus dječje paralize."

Dan Jurafsky: Does Lufthansa serve breakfast and San Jose? Well, that sounds funny.

"Servira li Lufthansa doručak i San Jose? Pa, to zvuči smiješno..."

Daphne Koller: So this is which coin you pick, and this is the two tosses.

"Dakle ovo predstavlja koji novčić odabirete, a ovo su dva bacanja..."

Andrew Ng: So in large-scale machine learning, we'd like to come up with computational ...

"U učenju računala na velikoj razini, željeli bismo osmisliti računalnu..."

(Applause)

(pljesak)

DK: It turns out, maybe not surprisingly,

Dakle, možda baš i ne tako iznenađujuće, ispada da

that students like getting the best content

studenti vole dobivati najbolje sadržaje

from the best universities for free.

sa najboljih sveučilišta besplatno.

Since we opened the website in February,

Otkako smo otvorili ovu internetsku stranicu u veljači,

we now have 640,000 students from 190 countries.

dosada imamo 640 000 studenata iz 190 zemalja.

We have 1.5 million enrollments,

Imamo 1,5 milijun prijava,

6 million quizzes in the 15 classes that have launched

6 milijuna testova unutar 15 dostupnih predmeta koji

so far have been submitted, and 14 million videos have been viewed.

su dosada ispunjeni, te 14 milijuna pregleda videozapisa.

But it's not just about the numbers,

Ali nije stvar samo u brojevima,

it's also about the people.

tu se radi i o ljudima.

Whether it's Akash, who comes from a small town in India

Bilo da govorimo o Ahasku, koji dolazi iz malog gradića u Indiji te

and would never have access in this case

nikada ne bi imao pristup u ovom slučaju

to a Stanford-quality course

predmetu najviše kvalitete sa Stanforda

and would never be able to afford it.

niti bi si to mogao priuštiti.

Or Jenny, who is a single mother of two

Ili da govorimo o Jenny koja je samohrana majka dvoje djece

and wants to hone her skills

i želi unaprijediti svoja znanja

so that she can go back and complete her master's degree.

kako bi se mogla vratiti na fakultet i diplomirati.

Or Ryan, who can't go to school,

Ili o Ryanu koji ne može pohađati školu

because his immune deficient daughter

jer njegova kćer sa imunodeficijencijom

can't be risked to have germs come into the house,

ne može riskirati da bakterije uđu u njihovu kuću,

so he couldn't leave the house.

tako da Ryan nije mogao napustiti kuću.

I'm really glad to say --

Zadovoljstvo mi je što mogu reći...

recently, we've been in correspondence with Ryan --

da smo nedavno kontaktirali Ryana...

that this story had a happy ending.

i da ova priča ima sretan završetak.

Baby Shannon -- you can see her on the left --

Mala Shannon koju vidite na lijevoj strani,

is doing much better now,

sada je puno bolje,

and Ryan got a job by taking some of our courses.

a Ryan se zaposlio zahvaljujući pohađanju naših predmeta.

So what made these courses so different?

Pa što je to što je učinilo ove predmete tako različitima od ostalih?

After all, online course content has been available for a while.

Jer ipak, online sadržaji i online nastava su dostupni već neko vrijeme.

What made it different was that this was real course experience.

Ono što ih je učinilo različitima je to što je ovo bilo potpuno realno nastavno iskustvo.

It started on a given day,

Započelo je točno određenog datuma,

and then the students would watch videos on a weekly basis

i studenti su gledali videozapise svakoga tjedna

and do homework assignments.

te su izvršavali domaće zadatke.

And these would be real homework assignments

I to su bile prave domaće zadaće

for a real grade, with a real deadline.

za pravu ocjenu sa pravim zadanim rokom završetka.

You can see the deadlines and the usage graph.

Možete vidjeti grafički prikaz zadanih rokova u usporedbi sa upotrebom materijala.

These are the spikes showing

Ovi vrhovi pokazuju

that procrastination is global phenomenon.

da je odugovlačenje globalni fenomen!

(Laughter)

(smijeh)

At the end of the course,

Na kraju nastavnog predmeta

the students got a certificate.

studenti su dobili potvrdu.

They could present that certificate

Mogli su pokazati na uvid tu potvrdu

to a prospective employer and get a better job,

potencijalnom poslodavcu kako bi dobili bolje poslove,

and we know many students who did.

a znamo puno studenata koji su upravo to i učinili.

Some students took their certificate

Neki su studenti uzeli svoju potvrdu

and presented this to an educational institution at which they were enrolled

i pokazali ga obrazovnoj instituciji koju su pohađali

for actual college credit.

kako bi dobili prave bodove.

So these students were really getting something meaningful

Dakle, ovi studenti su stvarno dobili nešto vrijedno

for their investment of time and effort.

kao rezultat njihovog uloženog vremena i truda.

Let's talk a little bit about some of the components

Recimo nešto o nekim sastavnim dijelovima

that go into these courses.

ovih nastavnih predmeta.

The first component is that when you move away

Prva važna činjenica je ta što kada se odmaknete

from the constraints of a physical classroom

od fizičkih ograničenja prave učionice i

and design content explicitly for an online format,

kada pripremite nastavni sadržaj posebno za online format,

you can break away from, for example,

onda se možete riješiti npr.

the monolithic one-hour lecture.

ustaljenog prethistorijskog predavanja u obliku školskog sata.

You can break up the material, for example,

Možete razdijeliti nastavni materijal npr.

into these short, modular units of eight to 12 minutes,

na ovakve kratke module, od kojih je svaki duljine 8 - 12 minuta

each of which represents a coherent concept.

i predstavlja cjelinu za sebe.

Students can traverse this material in different ways,

Studenti mogu prolaziti kroz ovaj nastavni materijal na više načina,

depending on their background, their skills or their interests.

ovisno o njihovoj pozadini, njihovim vještinama ili njihovim interesima.

So, for example, some students might benefit

Tako npr. neki studenti mogu izvući korist

from a little bit of preparatory material

iz malo nastavnih materijala za pripremu

that other students might already have.

dok neki drugi studenti možda to već znaju.

Other students might be interested in a particular

Neki studenti su možda zainteresirani za specifičnu

enrichment topic that they want to pursue individually.

temu kojom bi individualno željeli obogatiti svoje znanje detaljnijim istraživanjem.

So this format allows us to break away

Stoga nam ovakav oblik nastave omogućava da se riješimo

from the one-size-fits-all model of education,

modela obrazovanja "jedna-veličina-za-sve",

and allows students to follow a much more personalized curriculum.

i da omogućimo studentima da prate puno individualno prilagođeniji nastavni plan.

Of course, we all know as educators

Naravno, kao nastavnici znamo da

that students don't learn by sitting and passively watching videos.

studenti ne uče samo sjedeći i pasivno promatrajući videozapise.

Perhaps one of the biggest components of this effort

Možda je jedna od najvažnijih činjenica ovog projekta

is that we need to have students

ta da moramo imati studente

who practice with the material

koji vježbaju sa naučenim gradivom

in order to really understand it.

kako bi ga zbilja i razumjeli.

There's been a range of studies that demonstrate the importance of this.

Bilo je puno studija koje su demonstrirale važnost ove činjenice.

This one that appeared in Science last year, for example,

Ova je objavljena u časopisu Science prošle godine i npr.

demonstrates that even simple retrieval practice,

pokazuje kako čak i najjednostavnija vježba ponavljanja,

where students are just supposed to repeat

u kojoj su studenti trebali samo ponoviti

what they already learned

ono što su naučili,

gives considerably improved results

daje znatno bolje rezultate

on various achievement tests down the line

prilikom raznih testova rezultata učenja

than many other educational interventions.

u odnosu na mnoge druge obrazovne mjere.

We've tried to build in retrieval practice into the platform,

Pokušali smo implementirati vježbe ponavljanja u sustav

as well as other forms of practice in many ways.

ali i razne druge vrste vježbi.

For example, even our videos are not just videos.

Npr. čak niti naši videozapisi nisu samo videozapisi.

Every few minutes, the video pauses

Svakih nekoliko minuta, video se zaustavlja

and the students get asked a question.

i studentima se postavlja pitanje.

(Video) SP: ... These four things. Prospect theory, hyperbolic discounting,

"...ove četiri stvari..."

status quo bias, base rate bias. They're all well documented.

"...sve su one vrlo dobro zabilježene."

So they're all well documented deviations from rational behavior.

"Dakle to su dobro zabilježene devijantnosti od našeg racionalnog ponašanja."

DK: So here the video pauses,

Tu se video zaustavlja,

and the student types in the answer into the box

a student upisuje odgovor u kvadrat

and submits. Obviously they weren't paying attention.

i šalje ga. Očito nisu bili pažljivi.

(Laughter)

(smijeh)

So they get to try again,

Imaju pravo na ponovni pokušaj,

and this time they got it right.

i sada su točno odgovorili.

There's an optional explanation if they want.

Postoji i dodatno objašnjenje ukoliko to žele.

And now the video moves on to the next part of the lecture.

I sada se video nastavlja te prelazi na sljedeći dio predavanja.

This is a kind of simple question

Ovo je vrsta jednostavnog pitanja

that I as an instructor might ask in class,

koje ja kao predavač postavljam na svojim predavanjima,

but when I ask that kind of a question in class,

ali kada ja postavim takvo pitanje u učionici,

80 percent of the students

80% studenata

are still scribbling the last thing I said,

još uvijek zapisuje zadnje što sam rekla,

15 percent are zoned out on Facebook,

15% je na Facebooku,

and then there's the smarty pants in the front row

i ostaje ona skupina pametnjakovića u prvom redu

who blurts out the answer

koja ispljune odgovor

before anyone else has had a chance to think about it,

prije nego što itko drugi uopće uspije razmisliti o tome,

and I as the instructor am terribly gratified

a ja budem kao predavač užasno zahvalna

that somebody actually knew the answer.

što je itko zapravo znao odgovoriti.

And so the lecture moves on before, really,

I tako predavanje ide dalje, prije nego što ustvari

most of the students have even noticed that a question had been asked.

većina studenata uopće i shvati da je postavljeno nekakvo pitanje.

Here, every single student

Ovdje, svaki student

has to engage with the material.

mora biti aktivno uključen u nastavu.

And of course these simple retrieval questions

Naravno, ovakva jednostavna pitanja za ponavljanje

are not the end of the story.

nisu kraj cijele priče.

One needs to build in much more meaningful practice questions,

Potrebno je implementirati puno smislenija pitanja za ponavljanje i

and one also needs to provide the students with feedback

potrebno je također studentima osigurati povratne informacije

on those questions.

vezane uz ta pitanja.

Now, how do you grade the work of 100,000 students

E pa sada, kako ocijeniti rad 100 000 studenata

if you do not have 10,000 TAs?

ako nemate 10 000 asistenata?

The answer is, you need to use technology

Odgovor je da trebate iskoristiti tehnologiju

to do it for you.

da to učini umjesto vas.

Now, fortunately, technology has come a long way,

Nasreću je tehnologija jako uznapredovala

and we can now grade a range of interesting types of homework.

i sada možemo ocjenjivati cijeli niz zanimljivih vrsta zadataka.

In addition to multiple choice

Kao dodatak ponuđenim odgovorima i

and the kinds of short answer questions that you saw in the video,

vrsti kratkih pitanja kao što ste vidjeli u videozapisima,

we can also grade math, mathematical expressions

možemo ocjenjivati još i matematiku, matematičke izraze

as well as mathematical derivations.

te matematičke derivacije.

We can grade models, whether it's

Možemo ocjenjivati modele, bilo da su to

financial models in a business class

financijski modeli u poslovnom predmetu

or physical models in a science or engineering class

ili fizikalni modeli u znanstvenom ili inženjerskom predmetu,

and we can grade some pretty sophisticated programming assignments.

te možemo ocjenjivati neke poprilično sofisticirane zadatke programiranja.

Let me show you one that's actually pretty simple

Dopustite da vam pokažem jedan zadatak koji je ustvari poprilično jednostavan

but fairly visual.

ali poprilično vizualan.

This is from Stanford's Computer Science 101 class,

Ovo je sa Stanfordovog predmeta "Računalstvo 101"

and the students are supposed to color-correct

i studenti imaju zadatak popraviti boju

that blurry red image.

ove mutne crvene slike.

They're typing their program into the browser,

Upisuju svoj programski kod u pretraživač

and you can see they didn't get it quite right, Lady Liberty is still seasick.

i možete vidjeti kako nisu dali točan odgovor jer "Lady Liberty" još uvijek ima morsku bolest.

And so, the student tries again, and now they got it right, and they're told that,

Stoga student pokušava ponovno i ovaj put je u pravu, to im se potvrđuje,

and they can move on to the next assignment.

i sada mogu napredovati na sljedeći zadatak.

This ability to interact actively with the material

Ovakva mogućnost interaktivnog odnosa sa nastavnim materijalom

and be told when you're right or wrong

te informacija jeste li odgovorili točno ili pogrešno

is really essential to student learning.

su zbilja neophodni za učenje studenata.

Now, of course we cannot yet grade

Ipak, još uvijek ne možemo ocjenjivati

the range of work that one needs for all courses.

u potpunosti sve zadatke koji su potrebni za svaki nastavni predmet.

Specifically, what's lacking is the kind of critical thinking work

Specifično, ono što nedostaje je vrsta kritičkog osvrta na rad,

that is so essential in such disciplines

a koji je neophodan u disciplinama poput

as the humanities, the social sciences, business and others.

humanističkih, društvenih i poslovnih znanosti te ostalih.

So we tried to convince, for example,

Tako smo npr. pokušali uvjeriti

some of our humanities faculty

neke od naših humanističkih fakulteta

that multiple choice was not such a bad strategy.

da mogućnost višestrukog izbora i nije tako loša strategija.

That didn't go over really well.

To i nije baš prošlo dobro.

So we had to come up with a different solution.

Stoga smo morali osmisliti drukčije rješenje.

And the solution we ended up using is peer grading.

Rješenje koje smo na kraju osmislili je ocjenjivanje od kolega.

It turns out that previous studies show,

Ispada da prethodne studije pokazuju,

like this one by Saddler and Good,

poput ove od Saddlera i Gooda,

that peer grading is a surprisingly effective strategy

da je ocjenjivanje od kolega iznenađujuće učinkovita strategija

for providing reproducible grades.

za dobivanje pouzdanih ocjena.

It was tried only in small classes,

Iskušana je samo u malim razredima,

but there it showed, for example,

ali tamo je pokazala npr.

that these student-assigned grades on the y-axis

da su ovi studenti koji su ocjenjivali (na y-osi)

are actually very well correlated

ustvari usko vezani korelacijom

with the teacher-assigned grade on the x-axis.

sa ocjenama nastavnika (na x-osi).

What's even more surprising is that self-grades,

Još više je iznenađujuće to da je samo-ocjenjivanje,

where the students grade their own work critically --

gdje studenti kritički ocjenjuju sami svoj rad,

so long as you incentivize them properly

dok god ih odgovarajući potičete

so they can't give themselves a perfect score --

tako da si ne mogu dati savršenu ocjenu,

are actually even better correlated with the teacher grades.

ustvari čak i bolje povezano korelacijom sa ocjenama nastavnika.

And so this is an effective strategy

Stoga je ovo učinkovita strategija

that can be used for grading at scale,

koja se može biti koristiti za ocjenjivanje po zadanim vrijednostima,

and is also a useful learning strategy for the students,

a također je koristan način učenja za studente,

because they actually learn from the experience.

jer ustvari uče iz tog iskustva ocjenjivanja.

So we now have the largest peer-grading pipeline ever devised,

Tako da sada imamo najveću mrežu ocjenjivanja između kolega koja je ikada osmišljena,

where tens of thousands of students

gdje deseci tisuća studenata

are grading each other's work,

ocjenjuju jedni drugima radove,

and quite successfully, I have to say.

i moram reći - vrlo su uspješni u tome.

But this is not just about students

Ali nije ovdje samo riječ o studentima

sitting alone in their living room working through problems.

koji sjede sami u sobi i rješavaju zadatke.

Around each one of our courses,

Oko svakog našeg nastavnog predmeta

a community of students had formed,

se formirala zajednica studenata,

a global community of people

globalna zajednica ljudi

around a shared intellectual endeavor.

okupljenih oko zajedničkog intelektualnog napora.

What you see here is a self-generated map

Ovo što ovdje vidite je karta napravljena od

from students in our Princeton Sociology 101 course,

studenata u našem "Sociologija 101" predmetu sa Princetona,

where they have put themselves on a world map,

gdje su studenti sami sebe stavili na kartu svijeta

and you can really see the global reach of this kind of effort.

i zbilja možete vidjeti koliki je globalni doseg ove vrste projekta.

Students collaborated in these courses in a variety of different ways.

Studenti su surađivali u ovim predmetima na razne načine.

First of all, there was a question and answer forum,

Prvenstveno, postojao je forum sa pitanjima i odgovorima

where students would pose questions,

gdje bi jedni studenti postavljali pitanja

and other students would answer those questions.

a drugi studenti bi odgovarali na ta pitanja.

And the really amazing thing is,

Ono što je zbilja zadivljujuće je to što

because there were so many students,

je tako veliki broj studenata

it means that even if a student posed a question

značio da čak i ako je neki student postavio pitanje

at 3 o'clock in the morning,

u 3 sata ujutro,

somewhere around the world,

negdje u svijetu

there would be somebody who was awake

netko će biti budan

and working on the same problem.

i raditi će na istom problemu.

And so, in many of our courses,

Tako je u većini naših nastavnih predmeta

the median response time for a question

prosječno vrijeme dobivanja odgovora na pitanje

on the question and answer forum was 22 minutes.

postavljeno na forumu bilo 22 minute.

Which is not a level of service I have ever offered to my Stanford students.

To je razina usluge koju čak niti je nisam nikada omogućila svojim studentima na Stanfordu.

(Laughter)

(smijeh)

And you can see from the student testimonials

I možete vidjeti iz svjedočenja studenata

that students actually find

da oni ustvari smatraju

that because of this large online community,

kako su zbog ovakve ogromne zajednice

they got to interact with each other in many ways

mogli interaktivno surađivati jedni sa drugima na puno načina

that were deeper than they did in the context of the physical classroom.

koji su bili kvalitetniji od onih prisutnih u pravim učionicama.

Students also self-assembled,

Studenti su se također sami okupljali,

without any kind of intervention from us,

bez ikakvih intervencija sa naše strane,

into small study groups.

u male grupe za učenje.

Some of these were physical study groups

Neke od ovih su bile prave fizičke grupe za učenje

along geographical constraints

geografski uvjetovane

and met on a weekly basis to work through problem sets.

koje su se nalazile svaki tjedan da bi rješavali zadatke.

This is the San Francisco study group,

Ovo je grupa za učenje iz San Francisca,

but there were ones all over the world.

ali bilo je njih i po cijelom svijetu.

Others were virtual study groups,

Druge su bile virtualne grupe za učenje,

sometimes along language lines or along cultural lines,

ponekad uvjetovane jezikom ili kulturnim sličnostima,

and on the bottom left there,

i ovdje na donjoj lijevoj strani

you see our multicultural universal study group

možete vidjeti našu multikulturalnu grupu za učenje

where people explicitly wanted to connect

gdje su se ljudi eksplicitno željeli povezati

with people from other cultures.

sa ljudima iz drugih kultura.

There are some tremendous opportunities

Otvorile su se izvanredne mogućnosti i prednosti

to be had from this kind of framework.

ovakvog načina suradnje.

The first is that it has the potential of giving us

Kao prvo, postoji potencijal da dobijemo

a completely unprecedented look

potpuno novi pogled

into understanding human learning.

na razumijevanje ljudskog procesa učenja.

Because the data that we can collect here is unique.

Zato što su podaci koje ovdje možemo prikupiti jedinstveni.

You can collect every click, every homework submission,

Možete prikupiti svaki klik, svaku poslanu domaću zadaću,

every forum post from tens of thousands of students.

svaki post na forumu od desetaka tisuća studenata.

So you can turn the study of human learning

Tako da postoji mogućnost da promijenite način ljudskog učenja

from the hypothesis-driven mode

sa načina oslonjenog na hipoteze

to the data-driven mode, a transformation that,

na način oslonjen na podatke, promjena koja je

for example, has revolutionized biology.

npr. temeljito promijenila biologiju.

You can use these data to understand fundamental questions

Možete koristiti ove podatke kako bi razumjeli fundamentalna pitanja

like, what are good learning strategies

poput pitanja koje su to dobre i učinkovite strategije učenja

that are effective versus ones that are not?

a koje to nisu?

And in the context of particular courses,

U kontekstu pojedinačnih predmeta,

you can ask questions

možete postavljati pitanja

like, what are some of the misconceptions that are more common

poput pitanja koja su neka od uobičajenih pogrešnih razumijevanja

and how do we help students fix them?

i kako da pomognemo studentima da ih poprave?

So here's an example of that,

Evo stoga jedan primjer,

also from Andrew's Machine Learning class.

također sa Andrewovog predmeta "Kako računala uče".

This is a distribution of wrong answers

Ovo je raspodjela pogrešnih odgovora

to one of Andrew's assignments.

na jedan od Andrewovih zadataka.

The answers happen to be pairs of numbers,

Odgovor se sastoji od parova brojeva

so you can draw them on this two-dimensional plot.

pa ih možete nacrtati na ovom dvodimenzionalnom grafu.

Each of the little crosses that you see is a different wrong answer.

Svaki mali križić predstavlja pogrešni odgovor.

The big cross at the top left

Veliki križić na vrhu lijevo

is where 2,000 students

je onaj gdje je 2000 studenata

gave the exact same wrong answer.

dalo identičan pogrešan odgovor.

Now, if two students in a class of 100

E sada, ako dva studenta iz grupe od njih 100

give the same wrong answer,

daju pogrešan odgovor,

you would never notice.

ne biste nikada to primjetili.

But when 2,000 students give the same wrong answer,

Ali kada 2000 studenata da identičan pogrešan odgovor,

it's kind of hard to miss.

poprilično je teško to previdjeti.

So Andrew and his students went in,

Stoga su Andrew i njegovi studenti detaljnije pogledali

looked at some of those assignments,

neke od tih zadataka,

understood the root cause of the misconception,

shvatili su glavne uzroke pogrešnog shvaćanja

and then they produced a targeted error message

te su napravili ciljanu povratnu poruku u slučaju pogrešnog odgovora

that would be provided to every student

koja će se prikazati svakom studentu

whose answer fell into that bucket,

čiji je odgovor upao u tu kategoriju,

which means that students who made that same mistake

a to znači da oni studenti koji su napravili tu istu pogrešku

would now get personalized feedback

sada mogu dobiti individualnu prilagođenu povratnu informaciju

telling them how to fix their misconception much more effectively.

koji ih upućuje na to kako da poprave pogrešno razumijevanje na puno učinkovitiji način.

So this personalization is something that one can then build

Stoga je ovakvo individualno prilagođavanje nešto što se može izgraditi

by having the virtue of large numbers.

zahvaljujući posjedovanju ovih ogromnih brojeva.

Personalization is perhaps

Individualno prilagođavanje je možda

one of the biggest opportunities here as well,

također jedna od najvećih mogućnosti ovdje,

because it provides us with the potential

zato što nam olakšava

of solving a 30-year-old problem.

rješavanje problema starog 30 godina.

Educational researcher Benjamin Bloom, in 1984,

Obrazovni istraživač Benjamin Bloom je 1984. godine

posed what's called the 2 sigma problem,

postavio tzv. "2 sigma" problem,

which he observed by studying three populations.

koji je uočio promatrajući 3 vrste studenata.

The first is the population that studied in a lecture-based classroom.

Prva je grupa ona koja je učila u učionici uz predavanja.

The second is a population of students that studied

Druga je grupa sastavljena od onih studenata koji su učili

using a standard lecture-based classroom,

u učionici uz predavanja, ali

but with a mastery-based approach,

uz pristup savladavanja gradiva što znači

so the students couldn't move on to the next topic

da studenti nisu mogli napredovati na sljedeću cjelinu

before demonstrating mastery of the previous one.

ukoliko nisu pokazali da su uspješno svladali prethodnu.

And finally, there was a population of students

Konačno je postojala treća grupa studenata

that were taught in a one-on-one instruction using a tutor.

koji su učili pojedinačno sa instruktorima.

The mastery-based population was a full standard deviation,

Druga grupa sa pristupom savladavanja gradiva je bila za iznos varijance (standardne devijacije)

or sigma, in achievement scores better

tj. sigme bolja u postignutim rezultatima od

than the standard lecture-based class,

prve grupe studenata u učionicama,

and the individual tutoring gives you 2 sigma

a treća grupa sa instruktorima je dala za dvije sigme (varijance)

improvement in performance.

bolji napredak u rezultatima.

To understand what that means,

Kako bi razumjeli što to znači,

let's look at the lecture-based classroom,

pogledajmo učionicu sa predavanjima

and let's pick the median performance as a threshold.

i uzmimo srednju vrijednost rezultata kao prag.

So in a lecture-based class,

Tako je u učionici sa predavanjima

half the students are above that level and half are below.

pola studenata iznad tog praga, a pola je ispod praga.

In the individual tutoring instruction,

U individualnom podučavanju sa instruktorima

98 percent of the students are going to be above that threshold.

98% studenata je iznad tog praga.

Imagine if we could teach so that 98 percent of our students

Zamislite samo kada bismo mogli podučavati tako da 98% naših studenata

would be above average.

bude iznad prosjeka.

Hence, the 2 sigma problem.

Iz toga je nastao problem "2 sigme".

Because we cannot afford, as a society,

Nastao je iz razloga što kao društvo ne možemo priuštiti

to provide every student with an individual human tutor.

svakom studentu pojedinačno vlastitog instruktora.

But maybe we can afford to provide each student

Ali ipak, možda možemo priuštiti svakom studentu

with a computer or a smartphone.

računalo ili pametni telefon.

So the question is, how can we use technology

Stoga je pitanje kako možemo iskoristiti tehnologiju

to push from the left side of the graph, from the blue curve,

da nas pomakne sa lijeve strane grafa, sa plave krivulje,

to the right side with the green curve?

na desnu stranu sa zelenom krivuljom?

Mastery is easy to achieve using a computer,

Savladavanje znanja se lako postiže koristeći računala

because a computer doesn't get tired

jer se računalo ne umori

of showing you the same video five times.

nakon što pokaže isti videozapis pet puta zaredom.

And it doesn't even get tired of grading the same work multiple times,

Ne umori se niti ocjenjujući isti rad nekoliko puta,

we've seen that in many of the examples that I've shown you.

a to smo i vidjeli u brojnim primjerima koje sam vam pokazala.

And even personalization

I čak individualno prilagođavanje je

is something that we're starting to see the beginnings of,

nešto što tek vidimo u njegovim počecima,

whether it's via the personalized trajectory through the curriculum

bilo da je ono putem prilagođenog smjera nastave kroz predviđeni nastavni sadržaj

or some of the personalized feedback that we've shown you.

ili putem nekih od individualno prilagođenih povratnih informacija koje smo vam pokazali.

So the goal here is to try and push,

Stoga je ovdje cilj pokušati i potruditi se

and see how far we can get towards the green curve.

te vidjeti koliko daleko možemo doći do zelene krivulje.

So, if this is so great, are universities now obsolete?

Pa onda ako je sve ovo tako dobro jesu li sveučilišta postala nepotrebna?

Well, Mark Twain certainly thought so.

Mark Twain je zasigurno tako mislio.

He said that, "College is a place where a professor's lecture notes

Rekao je: "Fakultet je mjesto na kojemu bilješke profesora

go straight to the students' lecture notes,

prelaze ravno u bilješke studenta,

without passing through the brains of either."

bez da prođu kroz um obojice."

(Laughter)

(smijeh)

I beg to differ with Mark Twain, though.

Ipak, ne slažem se sa Markom Twainom.

I think what he was complaining about is not

Mislim da ono na što se on žalio nisu

universities but rather the lecture-based format

sveučilišta već način nastave uz predavanja

that so many universities spend so much time on.

a kojim se služi veliki broj sveučilišta.

So let's go back even further, to Plutarch,

Vratimo se još više u prošlost sve do Plutarha

who said that, "The mind is not a vessel that needs filling,

koji je rekao: "Um nije posuda koju treba napuniti,

but wood that needs igniting."

već je drvo koje treba potpaliti."

And maybe we should spend less time at universities

Možda bismo stoga trebali provoditi manje vremena na sveučilištima

filling our students' minds with content

puneći umove naših studenata sadržajem kroz

by lecturing at them, and more time igniting their creativity,

predavanja, a više vremena provoditi na potpaljivanje vatre njihove kreativnosti,

their imagination and their problem-solving skills

njihove mašte i njihovih vještina rješavanja problema

by actually talking with them.

na taj način da zapravo razgovaramo sa njima.

So how do we do that?

Pa kako da to učinimo?

We do that by doing active learning in the classroom.

Tako da koristimo akivno učenje u učionici.

So there's been many studies, including this one,

Bilo je puno studija, uključujući i ovu,

that show that if you use active learning,

koje pokazuju da se, ako koristite aktivno učenje

interacting with your students in the classroom,

interaktivnim djelovanjem na svoje studente u učionici,

performance improves on every single metric --

rezultati poboljšavaju na sve načine, bilo to

on attendance, on engagement and on learning

prisustvom, uključenosti ili učenjem

as measured by a standardized test.

i sve to je izmjereno standardiziranim testovima.

You can see, for example, that the achievement score

Možete vidjeti da se npr. rezultati postignuti testovima

almost doubles in this particular experiment.

skoro udvostručuju u ovom specifičnom eksperimentu.

So maybe this is how we should spend our time at universities.

Stoga je možda ovo način na koji trebamo trošiti svoje vrijeme na sveučilištu.

So to summarize, if we could offer a top quality education

Da zaključim, ako bismo mogli ponuditi obrazovanje vrhunske kvalitete

to everyone around the world for free,

svakome diljem svijeta besplatno,

what would that do? Three things.

što bismo time postigli? Tri stvari.

First it would establish education as a fundamental human right,

Prvo, to bi postavilo temelje obrazovanja kao osnovnog ljudskog prava

where anyone around the world

tako da bi svatko diljem svijeta

with the ability and the motivation

tko ima mogućnosti i motivaciju

could get the skills that they need

mogao dobiti vještine i znanja koja su mu potrebna

to make a better life for themselves,

kako bi osigurao bolji život za sebe,

their families and their communities.

svoju obitelj ili svoju zajednicu.

Second, it would enable lifelong learning.

Drugo, to bi omogućilo cjeloživotno učenje.

It's a shame that for so many people,

Šteta je da toliki broj ljudi

learning stops when we finish high school or when we finish college.

prekida proces učenja kada završi srednju školu ili fakultet.

By having this amazing content be available,

Imajući ovaj zadivljujući sadržaj dostupan

we would be able to learn something new

mogli bismo naučiti nešto novo

every time we wanted,

svaki put kada bismo to željeli,

whether it's just to expand our minds

bilo to da samo proširimo vidike

or it's to change our lives.

ili da kompletno promijenimo svoj život.

And finally, this would enable a wave of innovation,

I konačno, ovo bi omogućilo cijeli niz novih inovacija

because amazing talent can be found anywhere.

jer se zapanjujući talenti mogu pronaći posvuda.

Maybe the next Albert Einstein or the next Steve Jobs

Možda je sljedeći Albert Einstein ili sljedeći Steve Jobs

is living somewhere in a remote village in Africa.

negdje u zabačenom selu Afrike.

And if we could offer that person an education,

I ako bismo mogli ponuditi toj osobi obrazovanje,

they would be able to come up with the next big idea

onda bi ona mogla osmisliti sljedeću genijalnu ideju

and make the world a better place for all of us.

kojom bi učinila ovaj svijet boljim mjestom za sve nas ostale.

Thank you very much.

Hvala vam puno!

(Applause)

(pljesak)