Ben Goldacre: Battling Bad Science

Prevoditelj: Zlatko Smetisko Recezent: Katarina Smetko

So I'm a doctor, but I kind of slipped sideways into research,

Liječnik sam, ali sam malo skrenuo s puta i zašao u polje istraživanja

and now I'm an epidemiologist.

tako da sam sada epidemiolog.

And nobody really knows what epidemiology is.

Nitko ne zna što je zapravo epidemiologija.

Epidemiology is the science of how we know in the real world

Epidemiologija je znanost o tome kako znamo

if something is good for you or bad for you.

je li nešto dobro ili loše za nas.

And it's best understood through example

Primjerom je to najbolje objasniti

as the science of those crazy, wacky newspaper headlines.

kao znanost iza onih ludih, šašavih novinskih natpisa.

And these are just some of the examples.

Ovo su samo neki od primjera.

These are from the Daily Mail.

Ovo su novinski natpisi iz Daily Maila - svaka država na svijetu ima novine poput ovih.

Every country in the world has a newspaper like this.

Imaju taj stalni bizarni filozofski projekt

It has this bizarre, ongoing philosophical project

dijeljenja svih neživih stvari

of dividing all the inanimate objects in the world

na one koje ili uzrokuju ili sprečavaju rak.

into the ones that either cause or prevent cancer.

Here are some of the things they said cause cancer:

Neke od stvari za koje tvrde da uzrokuju rak jesu:

razvod, Wi-Fi, toaletne potrepštine i kava.

divorce, Wi-Fi, toiletries and coffee.

Neke od stvari za koje kažu da sprečavaju rak:

Some things they say prevent cancer:

kora kruha, crvena paprika, slatkiši i kava.

crusts, red pepper, licorice and coffee.

Već primjećujete proturječnosti.

So you can see there are contradictions.

Kava i uzrokuje i sprečava rak.

Coffee both causes and prevents cancer.

Kad nastavite čitati dalje, počinjete shvaćati

As you start to read on, you can see

that maybe there's some political valence behind some of this.

da iza ovakvih primjera stoji nekakva politička pozadina.

For women, housework prevents breast cancer,

Kućanski poslovi sprečavaju rak dojke kod žena,

but for men, shopping could make you impotent.

dok shopping može dovesti do impotencije kod muškaraca.

(Laughter)

Vidimo kako moramo početi

So we know that we need to start unpicking the science behind this.

odvajati znanstvene činjenice od svega toga.

And what I hope to show is that unpicking the evidence behind dodgy claims

Nadam se da ću pokazati

kako odvajanje sumnjivih tvrdnji,

odvajanje dokaza iza takvih tvrdnji,

isn't a kind of nasty, carping activity;

nije mukotrpna aktivnost,

it's socially useful.

već je društveno korisno,

But it's also an extremely valuable explanatory tool,

ali i iznimno vrijedno

kao sredstvo objašnjavanja.

because real science is about critically appraising the evidence

Bit prave znanosti jest

kritičko procjenjivanje dokaza s drugog stajališta.

for somebody else's position.

Na taj način funkcioniraju znanstveni časopisi.

That's what happens in academic journals,

Tako funkcioniraju znanstvene konferencije.

it's what happens at academic conferences --

Vrijeme pitanja i odgovora, nakon što su podaci izloženi,

the Q&A session after a postdoc presents data is often a bloodbath.

postaje mjesto oštrih napada,

And nobody minds that; we actively welcome it.

što nikome ne smeta. Aktivno se podržava.

It's like a consenting intellectual S&M activity.

Nalikuje odobrenoj intelektualnoj sado mazo aktivnosti.

(Laughter)

Ono što ću vam pokazati

So what I'm going to show you is all of the main things,

jesu glavne stvari,

glavne karakteristike moje discipline --

all of the main features of my discipline, evidence-based medicine.

medicine koja se temelji na dokazima.

And I will talk you through all of these and demonstrate how they work,

Proći ću s vama kroz te karakteristike

i pokazati vam kako funkcioniraju,

exclusively using examples of people getting stuff wrong.

koristeći isključivo primjere u kojima su ljudi nešto krivo shvatili.

We'll start with the absolute weakest form of evidence known to man,

Počet ćemo s najslabijim mogućim oblikom dokaza poznatim čovjeku:

autoritetom.

and that is authority.

Nas u znanosti ne zanima koliko titula imate uz ime.

In science, we don't care how many letters you have after your name --

Zanimaju nas razlozi zbog kojih vjerujete u nešto.

we want to know what your reasons are for believing something.

Kako znate je li nešto dobro

How do you know that something is good for us or bad for us?

ili loše za nas?

But we're also unimpressed by authority because it's so easy to contrive.

Autoritet nas ne impresionira

jer ga je lako izmisliti.

This is somebody called Dr. Gillian McKeith, PhD,

Ovo je netko tko se zove Dr. Gillian McKeith, dr.sc.,

ili punom liječničkom titulom - Gillian McKeith.

or, to give her full medical title, Gillian McKeith.

(Smijeh)

(Laughter)

Svaka zemlja ima nekoga poput nje.

Again, every country has somebody like this.

Ona je naš televizijski prehrambeni guru.

She is our TV diet guru.

She has five series of prime-time television,

Ima nevjerojatnih 5 sezona televizijskog serijala u udarnom terminu

giving out very lavish and exotic health advice.

u kojem daje ekstravagantne i egzotične zdravstvene savjete.

She, it turns out, has a non-accredited correspondence course PhD

Ispostavilo se da ima doktorat s nepriznatog dopisnog tečaja

odnekud iz Amerike.

from somewhere in America.

She also boasts that she's a certified professional member

Hvali se, također, kako je i akreditirani stručni član

Američkog udruženja nutricionističkih savjetnika,

of the American Association of Nutritional Consultants,

što zvuči nadasve glamurozno i uzbudljivo.

which sounds very glamorous; you get a certificate.

Od njih dobijete potvrdu i sve.

This one belongs to my dead cat, Hettie. She was a horrible cat.

Ova pripada mojoj mrtvoj mački Hetti. Bila je to grozna mačka.

Samo otiđete na njihovu web stranicu, ispunite formular

You go to the website, fill out the form,

i uplatite 60 dolara, a oni vam pošalju potvrdu poštom.

give them $60, it arrives in the post.

No, to nije jedini razlog zbog kojeg ovu osobu smatramo idiotom.

That's not the only reason we think this person is an idiot.

Ona tvrdi stvari poput --

She also says things like eat lots of dark green leaves,

trebate jesti mnogo tamnozelenog lišća

they contain chlorophyll and really oxygenate your blood.

jer ono sadrži mnogo klorofila, što će dovesti mnogo kisika u vašu krv.

Svatko tko je imao biologiju u školi sjetit će se

And anybody who's done school biology remembers

da klorofil i kloroplasti

that chlorophyll and chloroplasts only make oxygen in sunlight,

stvaraju kisik samo na sunčevom svjetlu,

and it's quite dark in your bowels after you've eaten spinach.

a u našim je crijevima posve mračno nakon što se pojeli špinat.

Potrebna nam je prava znanost, sa stvarnim dokazima.

Next, we need proper science, proper evidence.

So: "Red wine can help prevent breast cancer."

„Crno vino pomaže u sprečavanju raka dojke“.

Ovo je naslov članka iz britanskog Daily Telegrapha.

This is a headline from The Daily Telegraph in the UK.

„Čaša crnog vina dnevno može pomoći u sprečavanju raka dojke“.

"A glass of red wine a day could help prevent breast cancer."

Otiđete i nađete taj članak, i otkrit ćete

So you find this paper, and find that it is a real piece of science.

kako se radi o pravom znanstvenom radu.

It's a description of the changes in the behavior of one enzyme

Radi se o opisu promjena kod jednog enzima

when you drip a chemical extracted from some red grape skin

kad nakapate kemijski ekstrakt iz kože crnog grožđa

na stanice raka,

onto some cancer cells

in a dish on a bench in a laboratory somewhere.

koje se nalaze u nekoj petrijevoj posudi na nekom stolu u nekom laboratoriju.

And that's a really useful thing to describe in a scientific paper.

Ovo je stvarno korisno opisana stvar

u znanstvenom časopisu,

But on the question of your own personal risk of getting breast cancer

ali po pitanju osobnog rizika

i dobivanju raka dojke, ukoliko pijete crno vino,

if you drink red wine,

kaže vam frišku figu.

it tells you absolutely bugger all.

Zapravo, čini se da se rizik od raka dojke

Actually, it turns out that your risk of breast cancer

neznatno povećava

increases slightly with every amount of alcohol you drink.

pri svakoj količini popijenog alkohola..

So what we want are studies in real human people.

Ono što zahtijevamo jesu studije na stvarnim ljudima.

And here's another example.

Evo još jednog primjera.

This is from Britain's "leading" diet nutritionist in the Daily Mirror,

Ovaj dolazi od glavnog britanskog prehrambenog i nutricionističkog savjetnika u Daily Mirroru,

drugim najprodavanijim britanskim novinama.

our second-biggest selling newspaper.

„Istraživanje provedeno u Australiji 2001. godine

"An Australian study in 2001 found that olive oil,

otkriva kako maslinovo ulje u kombinaciji s voćem, povrćem i mahunarkama

in combination with fruits, vegetables and pulses,

vidljvo štiti kožu od bora“.

offers measurable protection against skin wrinklings,"

Zatim slijedi savjet:

and give the advice:

„Ako jedete maslinovo ulje i povrće, imat ćete manje bora“.

"If you eat olive oil and vegetables, you'll have fewer wrinkles."

Još vam vrlo susretljivo kažu kako doći do tog istraživanja.

They helpfully tell you how to find the paper,

Kad pronađete to istraživanje, vidjet ćete kako se radi o opservacijskom istraživanju.

and what you find is an observational study.

Očito je da se nitko nije vratio

Obviously, nobody has been able to go back to 1930,

u 1930. godinu,

sakupio sve ljude rođene u jednom rodilištu,

get all the people born in one maternity unit,

and half of them eat lots of fruit and veg and olive oil,

polovici dao da jede puno voća i povrća i maslinovog ulja,

a drugoj polovici hranu iz McDonald'sa,

half of them eat McDonald's,

and then we see how many wrinkles you've got later.

a zatim kasnije ustanovio koliko bora imaju.

Ono što morate napraviti jest uzeti ljude u sadašnjem trenutku.

You have to take a snapshot of how people are now.

I otkrit ćete, naravno,

And what you find is, of course:

kako ljudi koji jedu povrće i maslinovo ulje imaju manje bora.

people who eat veg and olive oil have fewer wrinkles.

But that's because people who eat fruit and veg and olive oil are freaks --

No, to je zato što su ljudi koji jedu voće i povrće i maslinovo ulje

čudaci, oni nisu normalni, oni su poput vas;

they're not normal, they're like you; they come to events like this.

dolaze na događaje poput ovog.

(Laughter)

Radi se o dotjeranim i bogatim ljudima, s manje mogućnosti da rade posao na otvorenom,

They're posh, they're wealthy, less likely to have outdoor jobs,

ili fizički posao,

less likely to do manual labor,

they have better social support, are less likely to smoke;

imaju bolju društvenu podršku, manje su mogućnosti da puše --

već se sada radi o nizu fascinantnih, međusobno povezanih

for a host of fascinating, interlocking

društvenih, političkih i kulturalnih razloga

social, political and cultural reasons,

zbog kojih su manje vjerojatnosti da imaju bore.

they're less likely to have wrinkles.

Ne radi se, dakle, samo o povrću i maslinovom ulju.

That doesn't mean it's the vegetables or olive oil.

(Smijeh)

(Laughter)

Idealno, ono što želite napraviti jest ispitivanje.

So ideally, what you want to do is a trial.

People think they're familiar with the idea of a trial.

Svi misle da su dobro upoznati s pojmom ispitivanje.

Ispitivanja su vrlo stara. Prvo se dogodilo u Bibliji – Danijel 1:12.

Trials are old; the first one was in the Bible, Daniel 1:12.

Vrlo je jednostavno -- uzmete hrpu ljudi, podijelite ih u dvije jednake grupe,

It's straightforward: take a bunch of people, split them in half,

jednu grupu tretirate na jedan način, drugu na drugi način,

treat one group one way, the other group, the other way.

vratite im se nešto kasnije

A while later, you see what happened to each of them.

i vidite što se dogodilo sa svakom od njih.

Ispričat ću vam o jednom ispitivanju

I'm going to tell you about one trial,

koje je u posljednjem desteljeću vjerojatno medijski najpraćenije

which is probably the most well-reported trial

u Britaniji.

in the UK news media over the past decade.

Radi se o ispitivanju kapsula ribljeg ulja.

This is the trial of fish oil pills.

Tvrdilo se da kapsule ribljeg ulja poboljšavaju rezultate u školi i ponašanje

The claim: fish oil pills improve school performance and behavior

prosječne djece.

in mainstream children.

Rekli su, „Napravili smo ispitivanje.

They said, "We did a trial.

All the previous ones were positive, this one will be too."

Sva su prijašnja ispitivanja bila pozitivna, tako da znamo da će i ovo biti takvo“.

Takva bi izjava odmah trebala biti znak za uzbunu.

That should ring alarm bells:

Ako već znate ishod svog ispitivanja, onda ga ne biste trebali raditi.

if you know the answer to your trial, you shouldn't be doing one.

Ili ste ga unaprijed namjestili

Either you've rigged it by design,

or you've got enough data so there's no need to randomize people anymore.

ili imate dovoljno podataka pa nema potrebe za istraživanjem prema slučajnom odabiru.

Ispitivanje je bilo ovako organizirano.

So this is what they were going to do in their trial:

They were taking 3,000 children,

Uzeli su 3 000 djece

they were going to give them these huge fish oil pills, six of them a day,

i svima su davali velike kapsule ribljeg ulja,

šest na dan,

and then, a year later, measure their school exam performance

a zatim su, godinu dana kasnije, izmjerili njihove razultate na školskom ispitu

and compare their performance

i usporedili ih

against what they predicted their exam performance would have been

s onime što su pretpostavili da bi bili rezultati

da ta djeca nisu uzimala kapsule.

if they hadn't had the pills.

Now, can anybody spot a flaw in this design?

Primjećuje li netko rupu u tom ispitivanju?

(Laughter)

Profesori metodologije kliničkog ispitivanja

And no professors of clinical trial methodology

are allowed to answer this question.

ne smiju odgovoriti na ovo pitanje.

So there's no control group.

Nema kontrolne skupine; kontrolna skupina ne postoji.

But that sounds really techie, right? That's a technical term.

Ali to zvuči previše stručno.

To je stručnan termin.

The kids got the pills, and their performance improved.

Djeca su dobila kapsule i njihov se rezultat poboljšao.

What else could it possibly be if it wasn't the pills?

Što bi drugo uopće moglo biti objašnjenje ako nisu pilule?

Odrasla su. Svi se s vremenom razvijamo.

They got older; we all develop over time.

And of course, there's the placebo effect,

Naravno, postoji i placebo efekt.

one of the most fascinating things in the whole of medicine.

Placebo efekt jedna je od najfascinantnijih stvari u cijeloj medicini.

Ne radi se samo o uzimanju tablete, vašem poboljšanju i smanjenju boli.

It's not just taking a pill and performance or pain improving;

Radi se o našim vjerovanjima i očekivanjima.

it's about our beliefs and expectations, the cultural meaning of a treatment.

Radi se o kulturalnom značenju liječenja.

Ovo je dokazano na cijelom nizu fascinantnih istraživanja

And this has been demonstrated in a whole raft of fascinating studies

u kojima se jedna vrsta placebo efekta upoređivala s drugom.

comparing one kind of placebo against another.

So we know, for example,

Znamo, primjerice, da su dvije šećerne tablete na dan

that two sugar pills a day are a more effective treatment

učinkovitije u liječenju želučanih čireva

for gastric ulcers

od jedne šećerne tablete.

than one sugar pill.

Dvije su šećerne tablete bolje od jedne.

Two sugar pills a day beats one a day.

Ovo je nečuveno i apsurdno otkriće, ali je istinito.

That's an outrageous and ridiculous finding, but it's true.

We know from three different studies on three different types of pain

Iz triju različitih istraživanja o tri različite vrste boli znamo

da je injekcija slane vode učinkovitiji način liječenja boli

that a saltwater injection is a more effective treatment

od uzimanja šećerne tablete, uzimanja placebo tablete --

than a sugar pill, a dummy pill with no medicine in it,

not because the injection or pills do anything physically to the body,

ne zbog nekog fizičkog učinka injekcije ili tablete na tijelo,

but because an injection feels like a much more dramatic intervention.

već zbog toga što injekcija predstavlja dramatičniju intervenciju.

Znamo da se našim vjerovanjima i očekivanjima

So we know that our beliefs and expectations can be manipulated,

može manipulirati

which is why we do trials where we control against a placebo,

zbog čega se i provode istraživanja

u kojima se ispituje placebo efekt --

where one half of the people get the real treatment,

u kojima polovica ljudi dobiva pravi lijek,

and the other half get placebo.

a druga polovica placebo.

But that's not enough.

No to nije dovoljno.

What I've just shown you are examples

Pokazao sam vam primjere jednostavnih i laganih načina

of the very simple and straightforward ways

na koje novinari, trgovci dodacima prehrani

that journalists and food supplement pill peddlers and naturopaths

i naturopati

can distort evidence for their own purposes.

iskrivljuju dokaze sebi u korist.

What I find really fascinating

Ono što mene fascinira

is that the pharmaceutical industry uses exactly the same kinds

jest da farmaceutska industrija

koristi iste smicalice i načine,

of tricks and devices,

ali malo sofisticiranije oblike istih,

but slightly more sophisticated versions of them,

in order to distort the evidence they give to doctors and patients,

kako bi iskrivila dokaze koje podnosi doktorima i pacijentima,

a koje koristimo kako bismo donijeli vrlo važne odluke.

and which we use to make vitally important decisions.

So firstly, trials against placebo:

Prvo, ispitivanja protiv placebo efekta:

svi misle kako bi se istraživanje trebalo temeljiti

everybody thinks a trial should be a comparison

na usporedbi novog lijeka i placeba.

of your new drug against placebo.

U mnogim je slučajevima takav pristup pogrešan.

But in a lot of situations that's wrong;

Često već imamo vrlo dobar lijek koji je trenutno dostupan,

often, we already have a good treatment currently available.

pa ne želimo znati kako je vaš nov alternativan lijek

So we don't want to know that your alternative new treatment

bolje od ničega.

is better than nothing,

Želimo znati da je bolji od trenutno najboljeg dostupnog lijeka.

but that it's better than the best available treatment we have.

Ali neprestano vidimo kako ljudi rade ispitivanja

And yet, repeatedly, you consistently see people doing trials

uspoređujući ih s placebom.

still against placebo.

And you can get licensed to bring your drug to market

I možete dobiti dozvolu za plasiranje lijeka na tržište

with only data showing that it's better than nothing,

samo na temelju podataka koji pokazuju da je vaš lijek bolji od ničega,

što je meni kao liječniku beskorisno kad pokušavam donijeti odluku.

which is useless for a doctor like me trying to make a decision.

Nije ovo jedini način kako namjestiti podatke.

But that's not the only way you can rig your data.

Podatke možete namjestiti

You can also rig your data

tako da ono s čime uspoređujete svoj novi lijek

by making the thing you compare your new drug against

izgleda kao sranje.

really rubbish.

You can give the competing drug in too low a dose,

Konkurentni lijek možete davati u premalenim količinama,

pa ljudi ne dobivaju prikladno liječenje.

so people aren't properly treated.

Ili ga možete davati u prevelikim količinama,

You can give the competing drug in too high a dose,

tako da uzrokuje nuspojave.

so people get side effects.

And this is exactly what happened

Upravo se to dogodilo

with antipsychotic medication for schizophrenia.

s antipsihoticima za shizofreniju.

Twenty years ago, a new generation of antipsychotic drugs were brought in;

Prije 20 godina tržištu je predstavljena nova generacija antipsihotika

s obećanjem da uzrokuju manje nuspojava.

the promise was they would have fewer side effects.

Počela su se raditi ispitivanja, usporedbe novih lijekova

So people set about doing trials of the new drugs against the old drugs.

i starih,

But they gave the old drugs in ridiculously high doses:

ali stari su lijekovi bili davani u nevjerojatno visokim dozama --

20 miligrama haloperidola dnevno.

20 milligrams a day of haloperidol.

Unaprijed je određeno

And it's a foregone conclusion if you give a drug at that high a dose,

da ako ljudima dajete lijek u tako visokim dozama

it will have more side effects, and your new drug will look better.

imat će više nuspojava, a vaš će novi lijek izgledati bolje.

Prije 10 godina, povijest se ponovila

Ten years ago, history repeated itself,

sa, začuđujuće, risperidonom, prvim lijekom nove generacije antipsihotika

when risperidone, the first of the new-generation antipsychotic drugs,

čije je autorsko pravo isteklo pa se mogao kopirati.

came off copyright, so anybody could make copies.

Everybody wanted to show their drug was better than risperidone,

Svi su htjeli pokazati kako je njihov lijek bolji od risperidona

pa ste mogli pronaći hrpu istraživanja u kojima su se novi antipsihotici

so you see trials comparing new antipsychotic drugs

uspoređivali sa risperidonom u dozi od osam miligrama dnevno.

against risperidone at eight milligrams a day.

Ne radi se tu o nekoj ludoj ili ilegalnoj dozi,

Again, not an insane dose, not an illegal dose,

ali o dozi koja je na gornjoj granici normalne.

but very much at the high end of normal.

Tako da će vaš lijek zasigurno izgledati bolje.

So you're bound to make your new drug look better.

Nije začuđujuće, gledano sveukupno,

And so it's no surprise that overall,

industry-funded trials are four times more likely

da će istraživanja financirana od strane farmaceutske industrije

četiri puta vjerojatnije dati pozitivan rezultat

to give a positive result

than independently sponsored trials.

nego nezavisno financirana istraživanja.

But -- and it's a big but --

Ali -- i to je veliko ali --

(Laughter)

(Smijeh)

ispada da

it turns out,

when you look at the methods used by industry-funded trials,

kad usporedite metode korištene u istraživanjima farmaceutskih industrija,

da su ta istraživanja zapravo bolja

that they're actually better than independently sponsored trials.

od nezavisno financiranih ispitivanja.

And yet, they always manage to get the result that they want.

Ali svejedno uspiju dobiti rezultat koji žele.

So how does this work?

Kako to funkcionira?

(Laughter)

Kako možemo objasniti ovaj čudan fenomen?

How can we explain this strange phenomenon?

Well, it turns out that what happens

Ispada da se to događa

is the negative data goes missing in action;

zbog toga što negativni podaci nestanu;

it's withheld from doctors and patients.

podaci se uskrate doktorima i pacijentima.

And this is the most important aspect of the whole story.

Ovo je najvažniji dio cijele priče.

Nalazi se na vrhu piramide dokaza.

It's at the top of the pyramid of evidence.

Potrebni su nam svi podaci o određenom lijeku

We need to have all of the data on a particular treatment

kako bismo znali je li učinkovit ili nije.

to know whether or not it really is effective.

Postoje dva različita načina na koje možete primijetiti

There are two different ways you can spot whether some data has gone missing.

jesu li neki podaci nestali.

Možete koristiti statistiku ili priče.

You can use statistics or you can use stories.

I prefer statistics, so that's what I'll do first.

Osobno, više volim statistiku, pa ću se prvo pozabaviti njome.

This is a funnel plot.

Postoji nešto što se zove ljevkasti grafikon.

A funnel plot is a very clever way of spotting

On predstavlja pametan načim zamjećivanja

if small negative trials have disappeared, have gone missing in action.

jesu li maleni negativni pokusi nestali, je li ih pojela noć.

This is a graph of all of the trials done on a particular treatment.

Ovo je grafikon svih ispitivanja

učinjenih za određeni lijek.

As you go up towards the top of the graph,

Kako se primičete vrhu grafikona

what you see is each dot is a trial.

vidite da svaka točka predstavlja jedno ispitivanje.

As you go up, those are bigger trials, so they've got less error;

Kako idete prema vrhu, ispitivanja su sve veća pa imaju manje pogrešaka.

they're less likely to be randomly false positives or negatives.

Manja je vjerojatnost da će biti nasumični lažni pozitivi ili lažni negativi.

So they all cluster together.

Svi su zajedno skupljeni.

The big trials are closer to the true answer.

Veća su ispitivanja bliža točnom odgovoru.

Then as you go further down at the bottom,

Kako se spuštate prema dnu grafikona,

what you can see is, on this side, spurious false negatives,

ono što vidite na ovoj strani jesu patvoreni lažni negativi,

and over on this side, spurious false positives.

a na ovoj strani patvoreni lažni pozitivi.

Ako postoje sustavne greške objavljivanja,

If there is publication bias,

ako su mali negativni pokusi nestali,

if small negative trials have gone missing in action,

you can see it on one of these graphs.

možete to primijetiti na jednom od ovih grafikona.

So you see here that the small negative trials

Ovdje vidite kako su mali negativni pokusi,

that should be on the bottom left have disappeared.

koji su se trebali nalaziti dolje lijevo, nestali.

Ovo je grafikon koji pokazuje prisutnost sustavne pogreške objavljivanja

This is a graph demonstrating the presence of publication bias

u istraživanjima sustavnih progrešaka objavljivanja.

in studies of publication bias.

Mislim da je ovo najsmješniji epidemiološki vic

And I think that's the funniest epidemiology joke you will ever hear.

koji ćete ikad čuti.

(Laughter)

Ovako to dokazujete statistički,

That's how you can prove it statistically.

ali što je s pričama?

But what about stories?

Well, they're heinous, they really are.

One su gnusne, stvarno jesu.

This is a drug called reboxetine.

Ovo je lijek reboksetin.

This is a drug which I, myself, have prescribed to patients.

Ovaj sam lijek osobno prepisivao pacijentima.

Ja sam stvarno štreberski liječnik.

And I'm a very nerdy doctor.

I hope I go out of my way

Svim se silama trudim pročitati i razumjeti svu literaturu.

to try and read and understand all the literature.

Čitao sam ispitivanja o ovom lijeku. Sva su bila pozitivna. Sva su bila dobro provedena.

I read the trials on this.

They were all positive, all well-conducted.

Nisam našao zamjerku.

I found no flaw.

Nažalost, na kraju se ispostavilo

Unfortunately, it turned out, that many of these trials were withheld.

da su mnoga ispitivanja bila zatajena.

In fact, 76 percent of all of the trials that were done on this drug

Točnije, 76 posto

svih ispitivanja napravljenih na ovom lijeku

bilo je zatajeno liječnicima i pacijentima.

were withheld from doctors and patients.

Kad razmislite o tome,

Now if you think about it,

if I tossed a coin a hundred times,

ako bacim novčić stotinu puta

and I'm allowed to withhold from you the answers half the times,

i dozvoljeno mi je zatajiiti vam

rezultate polovice tih bacanja,

then I can convince you that I have a coin with two heads.

mogu vas uvjeriti

da imam novčić s dvije glave.

If we remove half of the data,

Ako polovicu podataka uklonimo

we can never know what the true effect size of these medicines is.

nikad ne možemo znati kakav točno učinak ima ovaj lijek.

Ovo nije jedina takva priča.

And this is not an isolated story.

Zatajeno je oko polovice svih rezultata ispitivanja o antidepresivima.

Around half of all of the trial data on antidepressants has been withheld,

ali tu priča ne staje.

but it goes way beyond that.

The Nordic Cochrane Group were trying to get ahold of the data on that

Grupa Nordic Cochrane pokušala je prikupiti podatke o tome,

u želji da ih ujedini.

to bring it all together.

Grupa Cochrane internacionalna je neprofitna udruga

The Cochrane Groups are an international nonprofit collaboration

koja objavljuje sustavne preglede svih podataka ikada prikazanih.

that produce systematic reviews

of all of the data that has ever been shown.

Potreban im je pristup svim podacima ispitivanja.

And they need to have access to all of the trial data.

No, tvrtke im uskraćuju podatke,

But the companies withheld that data from them.

So did the European Medicines Agency --

kao i Europska agencija za lijekove,

i to zadnje tri godine.

for three years.

This is a problem that is currently lacking a solution.

Problem je to kojem trenutno nedostaje rješenje.

And to show how big it goes, this is a drug called Tamiflu,

Da vam pokažem koliko daleko to ide: ovo je lijek Tamiflu,

which governments around the world

na koji su vlade diljem svijeta

have spent billions and billions of dollars on.

potrošile milijarde i milijarde dolara.

Potrošile su taj novac jer su se povodile za obećanjem

And they spend that money on the promise that this is a drug

kako će ovaj lijek smanjiti stopu komplikacija

which will reduce the rate of complications with flu.

vezanih uz gripu.

Već imamo podatke

We already have the data

showing it reduces the duration of your flu by a few hours.

koji pokazuju da smanjuje trajanje gripe za par sati.

No, to mene ne zanima. Vlade to ne zanima.

But I don't care about that, governments don't care.

Žao mi je ako imate gripu, znam da je to grozno,

I'm sorry if you have the flu, I know it's horrible,

ali ne ćemo potrošiti milijarde dolara

but we're not going to spend billions of dollars

kako bismo smanjili trajanje simptoma vaše gripe

trying to reduce the duration of your flu symptoms by half a day.

za pola dana.

We prescribe these drugs.

Prepisujemo ovakve lijekove, gomilamo rezerve za hitne slučajeve

We stockpile them for emergencies

pod uvjetom da će smanjiti broj komplikacija,

on the understanding they'll reduce the number of complications,

što znači sprečavanje upale pluća i smrti.

which means pneumonia and death.

Grupa Cochrane koja se bavi zaraznim bolestima, sa sjedištem u Italiji,

The infectious diseases Cochrane Group, which are based in Italy,

pokušava dobiti

has been trying to get the full data in a usable form

sve podatke od farmaceutskih tvrtki, u razumljivom obliku,

out of the drug companies,

kako bi mogla donijeti odluku

so they can make a full decision

about whether this drug is effective or not,

je li taj lijek djelotvoran ili nije.

and they've not been able to get that information.

Do sada nisu uspjeli dobiti te informacije.

This is undoubtedly the single biggest ethical problem

Ovo je, bez sumnje,

najveći etički problem

facing medicine today.

s kojim se suočava današnja medicina.

Ne možemo donositi odluke

We cannot make decisions in the absence of all of the information.

ako nemamo sve informacije.

So it's a little bit difficult from there

Teško je završiti

to spin in some kind of positive conclusion.

nekim pozitivnim zaključkom.

Ali rekao bih ovo:

But I would say this:

I think that sunlight

mislim da je sunčeva svjetlost

is the best disinfectant.

najbolji dezinficijens.

Sve se ovo događa nama pred nosom,

All of these things are happening in plain sight,

and they're all protected by a force field of tediousness.

a oni su svi zaštićeni

zaštitnim poljem sporosti.

And I think, with all of the problems in science,

Smatram, sa svim problemima u znanosti,

da najbolje što možemo napraviti

one of the best things that we can do

is to lift up the lid, finger around at the mechanics

jest podići pokolopac,

počeprkati po mehanici i zaviriti unutra.

and peer in.

Hvala vam najljepša.

Thank you very much.

(Applause)

(Pljesak)