Ben Goldacre: Battling Bad Science

Translator: Indre Survilaite Reviewer: Julija L.

So I'm a doctor, but I kind of slipped sideways into research,

Esu aš gydytojas, bet nuslydau į tyrimų sritį,

and now I'm an epidemiologist.

tad dabar esu epidemiologas.

And nobody really knows what epidemiology is.

Ir niekas iš tikrųjų nežino, kas yra epidemiologija.

Epidemiology is the science of how we know in the real world

Epidemiologija yra mokslas, aiškinantis, kaip tikrajame pasaulyje žinoti,

if something is good for you or bad for you.

kas jums naudinga ir kas kenkia.

And it's best understood through example

Ir ji geriausiai suprantama, pavyzdžiui,

as the science of those crazy, wacky newspaper headlines.

kaip tų beprotiškų, trenktų laikraščių antraščių mokslas.

And these are just some of the examples.

Štai keletas pavyzdžių.

These are from the Daily Mail.

Šios yra iš "Daily Mail" (britų laikraštis). Kiekviena pasaulio šalis turi po tokį laikraštį.

Every country in the world has a newspaper like this.

Jame vyksta toks keistas filosofinis projektas:

It has this bizarre, ongoing philosophical project

visi negyvi pasaulio objektai skirstomi

of dividing all the inanimate objects in the world

į sukeliančius vėžį arba užkertančius jam kelią.

into the ones that either cause or prevent cancer.

Here are some of the things they said cause cancer:

Štai keli dalykai, apie kuriuos pastaruoju metu sakoma, kad sukelia vėžį:

skyrybos, Wi-Fi, kosmetika ir kava.

divorce, Wi-Fi, toiletries and coffee.

Štai keletas dalykų, anot jų, stabdančių vėžį:

Some things they say prevent cancer:

duonos plutelė, raudonieji pipirai, saldymedis ir kava.

crusts, red pepper, licorice and coffee.

Iškart matote, kad yra prieštaravimų.

So you can see there are contradictions.

Kava vėžį ir sukelia, ir saugo nuo jo.

Coffee both causes and prevents cancer.

Pradėjus straipsnį skaityti toliau, matyti,

As you start to read on, you can see

that maybe there's some political valence behind some of this.

kad galbūt už to slepiasi kokios nors politinės jėgos.

For women, housework prevents breast cancer,

Tad moteris namų ruoša saugo nuo krūties vėžio,

but for men, shopping could make you impotent.

o vyrams apsipirkinėjimas gali sukelti impotenciją.

(Laughter)

Tad aišku, kad reik pradėti

So we know that we need to start unpicking the science behind this.

narplioti už šito slypintį mokslą.

And what I hope to show is that unpicking the evidence behind dodgy claims

Aš tikiuosi parodyti,

kad narplioti neaiškius teiginius,

išnarplioti tų neaiškių teiginių įrodymus

isn't a kind of nasty, carping activity;

nėra bjaurus kabinėjimasis,

it's socially useful.

tai naudinga visuomenei,

But it's also an extremely valuable explanatory tool,

bet taip pat ir itin vertingas

aiškinamasis įrankis.

because real science is about critically appraising the evidence

Nes tikrame moksle visada

kritiškai vertinami kieno nors kito pozicijos įrodymai.

for somebody else's position.

Tai vyksta akademiniuose žurnaluose.

That's what happens in academic journals,

Tai vyksta akademinėse konferencijose.

it's what happens at academic conferences --

Per diskusiją, pristačius duomenis apie savo veiklą,

the Q&A session after a postdoc presents data is often a bloodbath.

dažnai kraujo upės liejas.

And nobody minds that; we actively welcome it.

Ir niekas tam neprieštarauja. Mes tai aktyviai palaikome.

It's like a consenting intellectual S&M activity.

Tai lyg pritarti intelektualiniam sadomazochistiniam užsiėmimui.

(Laughter)

Taigi ką ketinu jums parodyti,

So what I'm going to show you is all of the main things,

yra visi pagrindiniai dalykai,

visi pagrindiniai požymiai mano disciplinos -

all of the main features of my discipline, evidence-based medicine.

įrodymais pagrįstos medicinos.

And I will talk you through all of these and demonstrate how they work,

Ir visus juos jums nupasakosiu

ir pademonstruosiu, kaip jie veikia,

exclusively using examples of people getting stuff wrong.

naudodamasis vien tik pavyzdžiais, kur žmonės ką nors ne taip suprato.

We'll start with the absolute weakest form of evidence known to man,

Tad pradėkime nuo pačios silpniausios žmogui žinomos įrodymų formos -

autoriteto.

and that is authority.

Moksle mums nerūpi, kiek raidžių seka po jūsų vardo.

In science, we don't care how many letters you have after your name --

Moksle mes norime žinoti, dėl kokių priežasčių jūs kuo nors tikite.

we want to know what your reasons are for believing something.

Iš kur žinote, kas mums gerai,

How do you know that something is good for us or bad for us?

o kas kenkia?

But we're also unimpressed by authority because it's so easy to contrive.

Bet mums autoritetas nedaro įspūdžio,

nes jį lengva sukurti.

This is somebody called Dr. Gillian McKeith, PhD,

Štai asmuo vardu dr. Gillian McKeith

arba, su pilnu medicininiu titulu, Gillian McKeith.

or, to give her full medical title, Gillian McKeith.

(Juokas)

(Laughter)

Vėlgi, kiekvienoj šaly yra panašių žmonių.

Again, every country has somebody like this.

Ji - mūsų TV dietų guru.

She is our TV diet guru.

She has five series of prime-time television,

Ji jau galingus penkis sezonus geriausiu laiku rodomose laidose

giving out very lavish and exotic health advice.

dalina prašmatnius ir egzotiškus sveikatos patarimus.

She, it turns out, has a non-accredited correspondence course PhD

Ji, pasirodo, daktaro laispnį įgijo po neakredituotų kursų paštu

kažkur Amerikoje.

from somewhere in America.

She also boasts that she's a certified professional member

Ji taip pat giriasi, kad yra sertifikuota profesionali

Amerikos mitybos konsultantų asociacijos narė,

of the American Association of Nutritional Consultants,

kas skamba labai žaviai ir įdomiai.

which sounds very glamorous; you get a certificate.

Gauni pažymėjimą ir visa kita.

This one belongs to my dead cat, Hettie. She was a horrible cat.

Šis priklauso mano mirusiai katei Hetti. Ji buvo siaubinga katė.

Tiesiog nueinat į tinklalapį, užpildot anketą,

You go to the website, fill out the form,

sumokat jiems 60$, ir pažymėjimas atkeliauja paštu.

give them $60, it arrives in the post.

Tai ne vienintelė priežastis, kodėl manom, kad šis asmuo - kvailys.

That's not the only reason we think this person is an idiot.

Ji taip pat pasakoja tokius dalykus kaip:

She also says things like eat lots of dark green leaves,

reikia valgyti daug tamsiai žalių lapų,

they contain chlorophyll and really oxygenate your blood.

nes juose yra labai daug chlorofilo ir jis gerai prisotins jūsų kraują deguonimi.

Kiekvienas mokykloje mokęsis biologijos atsimena,

And anybody who's done school biology remembers

kad chlorofilas ir chloroplastai

that chlorophyll and chloroplasts only make oxygen in sunlight,

deguonį gamina tik saulės šviesoje,

and it's quite dark in your bowels after you've eaten spinach.

o užvalgius špinatų jūsų viduriuose yra gana tamsu.

Toliau, mums reikia tikro mokslo, tikrų įrodymų.

Next, we need proper science, proper evidence.

So: "Red wine can help prevent breast cancer."

Taigi "raudonasis vynas gali užkirsti kelią krūties vėžiui".

Tai antraštė iš Jungtinės Karalystės "Daily Telegraph".

This is a headline from The Daily Telegraph in the UK.

"Taurė raudonojo vyno kasdien gali padėti užkirsti kelią krūties vėžiui."

"A glass of red wine a day could help prevent breast cancer."

Taigi susirandat šį straipsnį ir atrandat, kad

So you find this paper, and find that it is a real piece of science.

tai yra gabalėlis tikro mokslo.

It's a description of the changes in the behavior of one enzyme

Tai aprašymas, kaip keičiasi vienas fermentas,

when you drip a chemical extracted from some red grape skin

kai užlašinama cheminės medžiagos išskirtos iš raudonųjų vynuogių žievelės

ant vėžio ląstelių

onto some cancer cells

in a dish on a bench in a laboratory somewhere.

esančių kažkur lėkštelėje ant laboratorijos stalo.

And that's a really useful thing to describe in a scientific paper.

Tai tikrai naudingas aprašas

mokslo leidinyje,

But on the question of your own personal risk of getting breast cancer

bet apie klausimą, kiek jums asmeniškai gresia

susirgti krūties vėžiu, jei geriate raudonąjį vyną,

if you drink red wine,

jis jums pasako visišką šnipštą.

it tells you absolutely bugger all.

Tiesą sakant, pasirodo, kad krūties vėžio rizika

Actually, it turns out that your risk of breast cancer

truputį padidėja

increases slightly with every amount of alcohol you drink.

su kiekvienu jūsų išgeriamu alkoholio kiekiu.

So what we want are studies in real human people.

Tad mes norime tyrimų su tikrais žmonėmis.

And here's another example.

Štai dar vienas pavyzdys.

This is from Britain's "leading" diet nutritionist in the Daily Mirror,

Tai iš Britanijos pirmaujančio dietų ir mitybos žinovo "Daily Mirror",

kuris yra mūsų antras perkamiausias laikraštis.

our second-biggest selling newspaper.

"Australų tyrime 2001-aisiais

"An Australian study in 2001 found that olive oil,

atrasta, kad alyvuogių aliejus suderinatas su vaisiais, daržovėmis ir ankštiniais

in combination with fruits, vegetables and pulses,

teikia išmatuojamą apsaugą nuo odos raukšlėjimosi."

offers measurable protection against skin wrinklings,"

Ir tada jie jums pataria:

and give the advice:

"jei valgysite alyvuogių aliejų ir daržoves, turėsite mažiau odos raukšlių."

"If you eat olive oil and vegetables, you'll have fewer wrinkles."

Ir jie labai paslaugiai paaiškina jums, kaip susirasti tą straipsnį.

They helpfully tell you how to find the paper,

Tad susiieškote tą straipsnį ir paaiškėja, kad tai yra stebimasis tyrimas.

and what you find is an observational study.

Aišku niekas negalėjo

Obviously, nobody has been able to go back to 1930,

sugrįžti į 1930-uosius,

surinkti visus žmones gimusius vienuose gimdymo namuose,

get all the people born in one maternity unit,

and half of them eat lots of fruit and veg and olive oil,

kad pusė iš jų valgytų daug vaisių, daržovių ir alyvuogių aliejaus,

o kita pusė valgytų McDonalds maistą,

half of them eat McDonald's,

and then we see how many wrinkles you've got later.

ir vėliau pažiūrėti, pas ką kiek raukšlių atsiras.

Reikia padaryti nuotraukas žmonių, kad pasimatytų, kaip jie atrodo.

You have to take a snapshot of how people are now.

Ir, žinoma, paaiškėtų, kad

And what you find is, of course:

žmonės, kurie valgo daržoves ir alyvuogių aliejų turi mažiau odos raukšlių.

people who eat veg and olive oil have fewer wrinkles.

But that's because people who eat fruit and veg and olive oil are freaks --

Bet taip yra todėl, kad žmonės, kurie valgo vaisius, daržoves ir alyvuogių aliejų,

jie yra išsigimėliai, jie nenormalūs, jie tokie, kaip jūs;

they're not normal, they're like you; they come to events like this.

jie lanko tokius renginius kaip šis.

(Laughter)

Jie prašmatnūs, turtingi, rečiau dirba lauke,

They're posh, they're wealthy, less likely to have outdoor jobs,

rečiau dirba fizinį darbą,

less likely to do manual labor,

they have better social support, are less likely to smoke;

gauna geresnę socialinę paramą, rečiau rūko -

tad, dėl galybės nuostabių, persipynusių,

for a host of fascinating, interlocking

socialinių, politinių ir kultūrinių priežasčių,

social, political and cultural reasons,

tikimybė, kad jie turės raukšlių, yra mažesnė.

they're less likely to have wrinkles.

Bet tai nereiškia, kad tą lemia daržovės ar alyvuogių aliejus.

That doesn't mean it's the vegetables or olive oil.

(Juokas)

(Laughter)

Idealiu atveju reikia atlikti tyrimą.

So ideally, what you want to do is a trial.

People think they're familiar with the idea of a trial.

Ir visi mano, kad yra susipažinę su tyrimo idėja.

Tyrimai labai seni. Pirmasis tyrimas minimas Biblijoje -- Danieliaus 1:12.

Trials are old; the first one was in the Bible, Daniel 1:12.

Tai labai paprasta - imat būrį žmonių, padalinat juos per pusę,

It's straightforward: take a bunch of people, split them in half,

su viena grupe elgiatės vienaip, su kita - kitaip,

treat one group one way, the other group, the other way.

ir truputį vėliau pasižiūrit,

A while later, you see what happened to each of them.

kas kiekvienai iš jų nutiko.

Aš jums papasakosiu apie vieną bandymą,

I'm going to tell you about one trial,

kuris turbūt yra geriausiai aprašytas bandymas

which is probably the most well-reported trial

J. K. spaudoje per paskutinį dešimtmetį.

in the UK news media over the past decade.

Tai žuvų taukų piliulių tyrimas.

This is the trial of fish oil pills.

Buvo teigiama, kad žuvų taukų piliulės pagerina paprastų vaikų

The claim: fish oil pills improve school performance and behavior

pasiekimus mokykloje ir elgesį.

in mainstream children.

Jie teigė: "mes atlikome tyrimą.

They said, "We did a trial.

All the previous ones were positive, this one will be too."

Visi ankstesni tyrimai buvo teigiami ir mes žinome, kad ir šis toks bus."

Tai visad turėtų įjungti aliarmo varpus.

That should ring alarm bells:

Nes jei jau žinote savo tyrimo atsakymą, jums tyrimo nereiktų daryti.

if you know the answer to your trial, you shouldn't be doing one.

Arba jūs planuotai jį suklastojote,

Either you've rigged it by design,

or you've got enough data so there's no need to randomize people anymore.

arba turite pakankamai duomenų ir žmonių skirstyti atsitiktine tvarka nebereikia.

Štai ką jie ketino savo tyrime daryti.

So this is what they were going to do in their trial:

They were taking 3,000 children,

Ėme 3000 vaikų,

they were going to give them these huge fish oil pills, six of them a day,

ketino duoti jiems didžiulių žuvų taukų piliulių

po šešias per dieną

and then, a year later, measure their school exam performance

ir tada, po metų, ketino išmatuoti jų mokyklinių egzaminų rezultatus

and compare their performance

ir palyginti pasiekimus

against what they predicted their exam performance would have been

su tuo, kokie jų pasiekimai būtų buvę,

jei jie nebūtų gėrę piliulių.

if they hadn't had the pills.

Now, can anybody spot a flaw in this design?

Ar kas nors gali įžiūrėti šio plano trūkumą?

(Laughter)

Klinikinių tyrimų metodologijos profesoriams

And no professors of clinical trial methodology

are allowed to answer this question.

į šį klausimą atsakinėti negalima.

So there's no control group.

Taigi nėra kontrolės; nėra kontrolinės grupės.

But that sounds really techie, right? That's a technical term.

Bet tai skamba labai techniškai.

Tai techninis terminas.

The kids got the pills, and their performance improved.

Vaikai gėrė piliules, ir jų pasiekimai pagerėjo.

What else could it possibly be if it wasn't the pills?

Kas gi kitas galėjo tą nulemti, jei ne piliulės?

Jie augo. Mes visi laikui bėgant vystomės.

They got older; we all develop over time.

And of course, there's the placebo effect,

Ir, žinoma, dar yra placebo efektas.

one of the most fascinating things in the whole of medicine.

Placebo efektas yra vienas žavingiausių dalykų visoje medicinoje.

Jis siejasi ne tik su tuo, kad išgėrus piliulę jūsų pasiekimai pagerėja, ir skausmas apmalšta.

It's not just taking a pill and performance or pain improving;

Jis siejasi su tuo, kuo mes įsitikinę ir ko tikimės.

it's about our beliefs and expectations, the cultural meaning of a treatment.

Jis siejas su kultūrine gydymo samprata.

Ir tai buvo pademonstruota galybėje nuostabių tyrimų,

And this has been demonstrated in a whole raft of fascinating studies

lyginančių vienokius placebus su kitokiais.

comparing one kind of placebo against another.

So we know, for example,

Tad mes žinome, pavyzdžiui, kad dvi cukrinės tabletės per dieną

that two sugar pills a day are a more effective treatment

efektyviau gydo skrandžio opas

for gastric ulcers

nei viena cukrinė tabletė.

than one sugar pill.

Dvi cukrinės tabletės per dieną pralenkia vieną cukrinę tabletę per dieną.

Two sugar pills a day beats one a day.

Ir tai yra neįtikėtinas ir juokingas atradimas, bet tai tiesa.

That's an outrageous and ridiculous finding, but it's true.

We know from three different studies on three different types of pain

Mes žinome iš trijų skirtingų tyrimų nagrinėjusių tris skirtingas skausmo rūšis,

kad druskos tirpalo injekcija efektyviau malšina skausmą nei

that a saltwater injection is a more effective treatment

išgerta cukrinė tabletė, išgerta netikra tabletė, kurioje nėra vaistų -

than a sugar pill, a dummy pill with no medicine in it,

not because the injection or pills do anything physically to the body,

ne todėl, kad injekcija ar tabletės fiziškai ką nors padaro kūnui,

but because an injection feels like a much more dramatic intervention.

bet todėl, kad injekcija sudaro dramatiškesnio įsikišimo įspūdį.

Tad žinome, kad mūsų įsitikinimais ir lūkesčiais

So we know that our beliefs and expectations can be manipulated,

galima manipuliuoti,

which is why we do trials where we control against a placebo,

būtent todėl ir atliekame tyrimus,

kur lyginame rezultatus su placebo efektu,

where one half of the people get the real treatment,

kur pusė žmonių gauna tikrus vaistus,

and the other half get placebo.

o kita pusė gauna placebą.

But that's not enough.

Bet to negana.

What I've just shown you are examples

Aš jums ką tik parodžiau pavyzdžius labai paprastų ir aiškių būdų,

of the very simple and straightforward ways

kuriais žurnalistai ir prekeiviai maisto papildų tabletėmis,

that journalists and food supplement pill peddlers and naturopaths

ir natūropatai

can distort evidence for their own purposes.

gali iškraipyti įrodymus savo labui.

What I find really fascinating

Kas mane stulbina,

is that the pharmaceutical industry uses exactly the same kinds

yra tai, kad vaistų pramonė

naudojasi tokiais pat triukais ir įnagiais,

of tricks and devices,

tik šiek tiek rafinuotesnėmis jų versijomis,

but slightly more sophisticated versions of them,

in order to distort the evidence they give to doctors and patients,

siekdami iškreipti įrodymus, kuriuos pateikia gydytojams ir pacientams,

ir kuriais mes remiamės priimdami gyvybiškai svarbius sprendimus.

and which we use to make vitally important decisions.

So firstly, trials against placebo:

Tad pirmiausia, tyrimai lyginant su placebu:

visi mano žinantys, kad tyrimas turi būti

everybody thinks a trial should be a comparison

jūsų naujojo vaisto palyginimas su placebu.

of your new drug against placebo.

Bet iš tikrųjų, daugeliu atveju tai netiesa.

But in a lot of situations that's wrong;

Nes dažnai jau yra prieinami labai geri vaistai,

often, we already have a good treatment currently available.

tad mes nenorim žinoti, kad jūsų alternatyvūs nauji vaistai

So we don't want to know that your alternative new treatment

yra geriau negu nieko.

is better than nothing,

Mes norime žinoti, kad jie yra geresni už geriausius mūsų dabar turimus vaistus.

but that it's better than the best available treatment we have.

Ir vis delto, pakartotinai, vis matome, kaip žmonės atlieka tyrimus

And yet, repeatedly, you consistently see people doing trials

vis tiek lygindami su placebu.

still against placebo.

And you can get licensed to bring your drug to market

Ir galima gauti licenciją išleisti savo vaistą į rinką,

with only data showing that it's better than nothing,

teturint duomenis, rodančius, kad jis geriau negu nieko,

kas tokiam kaip aš gydytojui, bandančiam priimti sprendimą, neduoda jokios naudos.

which is useless for a doctor like me trying to make a decision.

Bet tai ne vienintelis būdas klastoti duomenis.

But that's not the only way you can rig your data.

Duomenis klastoti taip pat galima

You can also rig your data

lyginimui su naujaisiais vaistais pasirenkant

by making the thing you compare your new drug against

visišką šlamštą.

really rubbish.

You can give the competing drug in too low a dose,

Galima vaistą-varžovą skirti per maža doze,

kad žmonės nebūtų tinkamai gydomi.

so people aren't properly treated.

Galima vaistą-varžovą skirti per didele doze,

You can give the competing drug in too high a dose,

kad sukeltų pašalinius poveikius.

so people get side effects.

And this is exactly what happened

Būtent tai nutiko

with antipsychotic medication for schizophrenia.

su antipsichotiniais vaistais šizofrenijai gydyti.

Twenty years ago, a new generation of antipsychotic drugs were brought in;

Prieš 20 metų buvo sukurta nauja antipsichotinių vaistų karta

ir pažadėta, kad jie turės mažiau pašalinių poveikių.

the promise was they would have fewer side effects.

Tad imtąsi vykdyti naujųjų vaistų tyrimus

So people set about doing trials of the new drugs against the old drugs.

lyginant su senaisiais,

But they gave the old drugs in ridiculously high doses:

bet senuosius buvo paskirta gerti nesąmoningai didelėmis dozėmis -

20 miligramų per dieną haloperidolio.

20 milligrams a day of haloperidol.

Išvada aiški -

And it's a foregone conclusion if you give a drug at that high a dose,

jei vaistas skiriamas tokio didumo doze,

it will have more side effects, and your new drug will look better.

jis turės daugiau pašalinių poveikių ir jūsų naujasis vaistas atrodys geriau.

Prieš 10 metų istorija pasikartojo, ir gana įdomiai,

Ten years ago, history repeated itself,

kai baigė galioti risperidono, kuris buvo pirmasis iš naujos kartos antipsichotinių vaistų,

when risperidone, the first of the new-generation antipsychotic drugs,

patentas, ir bet kas galėjo gaminti kopijas.

came off copyright, so anybody could make copies.

Everybody wanted to show their drug was better than risperidone,

Visi norėjo parodyti, kad jų naujasis vaistas yra geresnis už risperidoną,

tad galybėje tyrimų nauji antipsichotiniai vaistai

so you see trials comparing new antipsychotic drugs

lyginti su risperidonu, skirtu aštuonių miligramų per dieną dozėmis.

against risperidone at eight milligrams a day.

Vėlgi, ne beprotiška dozė, ne nelegali dozė,

Again, not an insane dose, not an illegal dose,

bet kiek tik galima didesnė priimtos normalios dozės ribose.

but very much at the high end of normal.

Tad naujas vaistas garantuotai atrodo geriau.

So you're bound to make your new drug look better.

Ir nieko nestebina, kad, apskritai,

And so it's no surprise that overall,

industry-funded trials are four times more likely

pramonės remiami tyrimai

keturiskart labiau linkę pateikti teigiamą rezultatą

to give a positive result

than independently sponsored trials.

nei nepriklausomai remiami tyrimai.

But -- and it's a big but --

Bet - ir tai didelis bet -

(Laughter)

(Juokas)

paaiškėja,

it turns out,

when you look at the methods used by industry-funded trials,

pažvelgus į metodus pramonės remiamų tyrimų,

kad jie iš tikrųjų geresni

that they're actually better than independently sponsored trials.

nei nepriklausomai remiamų tyrimų metodai.

And yet, they always manage to get the result that they want.

Ir vis tiek, jiems visada pavyksta pasiekti norimą rezultatą.

So how does this work?

Kaip tai veikia?

(Laughter)

Kaip paaiškinti šį keistą reiškinį?

How can we explain this strange phenomenon?

Well, it turns out that what happens

Pasirodo, darosi štai kas -

is the negative data goes missing in action;

neigiami duomenys pradingsta tyrimų metu;

it's withheld from doctors and patients.

jie nuslepiami nuo gydytojų ir pacientų.

And this is the most important aspect of the whole story.

Ir tai yra svarbiausias visos istorijos aspektas.

Jis yra įrodymų piramidės viršūnėje.

It's at the top of the pyramid of evidence.

Mums reikalingi visi duomenys apie tam tikrą gydymo būdą,

We need to have all of the data on a particular treatment

jei norime žinoti, ar jis iš tiesų efektyvus.

to know whether or not it really is effective.

Yra du būdai, kaip pastebėti,

There are two different ways you can spot whether some data has gone missing.

ar dalis duomenų nepradingo veiksmo metu.

Galite naudotis statistika arba galite naudotis istorijomis.

You can use statistics or you can use stories.

I prefer statistics, so that's what I'll do first.

Asmeniškai, man labiau patinka statistika, tad apie tai pirmiau.

This is a funnel plot.

Tai vadinamasis piltuvo grafikas.

A funnel plot is a very clever way of spotting

Piltuvo grafikas - labai gudrus būdas pastebėti,

if small negative trials have disappeared, have gone missing in action.

ar nepradingo maži neigiami tyrimai, ar nepasimetė tyrimų metu.

This is a graph of all of the trials done on a particular treatment.

Tai yra grafikas visų tyrimų,

atliktų tam tikram vaistui.

As you go up towards the top of the graph,

Kylant aukštyn link grafiko viršaus,

what you see is each dot is a trial.

matote, kad kiekvienas taškas yra tyrimas.

As you go up, those are bigger trials, so they've got less error;

Kuo aukščiau, tuo didesni tyrimai, todėl jų paklaida mažesnė.

they're less likely to be randomly false positives or negatives.

Mažiau tikėtina, kad jie bus atsitiktinai neteisingai teigiami ar atsitiktinai neteisingai neigiami.

So they all cluster together.

Jie visi susispiečia kartu.

The big trials are closer to the true answer.

Didieji tyrimai yra arčiau tikrojo atsakymo.

Then as you go further down at the bottom,

Tada, leidžiantis žemiau apačioje,

what you can see is, on this side, spurious false negatives,

matome, šioje pusėje, apgaulingus neteisingai neigiamus rezultatus,

and over on this side, spurious false positives.

o šioje pusėje - apgaulingus neteisingai teigiamus rezultatus.

Jei publikacija šališka,

If there is publication bias,

jei maži neigiami tyrimai pradingo,

if small negative trials have gone missing in action,

you can see it on one of these graphs.

tai matyti šiuose grafikuose.

So you see here that the small negative trials

Tad čia matote, kad mažieji neigiami tyrimai,

that should be on the bottom left have disappeared.

turėję būti apačioje kairėje, pradingo.

Šis grafikas vaizduoja publikacijų šališkumo buvimą

This is a graph demonstrating the presence of publication bias

publikacijų šališkumo tyrimuose.

in studies of publication bias.

Ir manau, kad tai yra linksmiausias epidemiologijos juokelis,

And I think that's the funniest epidemiology joke you will ever hear.

kurį jums kada nors teks girdėti.

(Laughter)

Taip šitai galima įrodyti statistiškai,

That's how you can prove it statistically.

o kaip istorijos?

But what about stories?

Well, they're heinous, they really are.

Na, jos yra baisios, tikrai.

This is a drug called reboxetine.

Tai vaistas pavadinimu reboksetinas.

This is a drug which I, myself, have prescribed to patients.

Aš pats esu jį išrašęs pacientams.

O esu labai moksliukiškas gydytojas.

And I'm a very nerdy doctor.

I hope I go out of my way

Tikiuosi, visada stengiuos perskaityti ir suprasti visą literatūrą.

to try and read and understand all the literature.

Skaičiau apie šio vaisto tyrimus. Jie visi buvo teigiami. Visi buvo gerai atlikti.

I read the trials on this.

They were all positive, all well-conducted.

Neradau jokio trūkumo.

I found no flaw.

Deja, paaiškėjo,

Unfortunately, it turned out, that many of these trials were withheld.

kad daug šių tyrimų buvo nutylėta.

In fact, 76 percent of all of the trials that were done on this drug

Iš tiesų, 76 procentai

visų atliktų šio vaisto tyrimų

buvo nuslėpti nuo gydytojų ir pacientų.

were withheld from doctors and patients.

Pagalvokim,

Now if you think about it,

if I tossed a coin a hundred times,

jei šimtą kartų mesčiau monetą

and I'm allowed to withhold from you the answers half the times,

ir man būtų leista nuo jūsų nuslėpti

atsakymus pusę kartų,

then I can convince you that I have a coin with two heads.

tada galėčiau jus įtikinti,

kad moneta turi du herbus.

If we remove half of the data,

Jei pašalinama pusė duomenų,

we can never know what the true effect size of these medicines is.

mes niekad negalime sužinoti, koks tikrasis šių vaistų poveikio dydis.

Ir tai ne viena atskira istorija.

And this is not an isolated story.

Maždaug pusė antidepresantų tyrimų duomenų buvo nuslėpta,

Around half of all of the trial data on antidepressants has been withheld,

bet būna ir dar sudėtingiau.

but it goes way beyond that.

The Nordic Cochrane Group were trying to get ahold of the data on that

Šiaurės Cochrane grupė bandė surinkti duomenis apie tai

į vieną vietą.

to bring it all together.

Cochrane grupės yra tarptautinė pelno nesiekianti organizacija,

The Cochrane Groups are an international nonprofit collaboration

kuri rengia sistemines visų kada nors pateiktų duomenų peržiūras.

that produce systematic reviews

of all of the data that has ever been shown.

Jiems reikalinga prieiga prie visų tyrimų duomenų.

And they need to have access to all of the trial data.

Bet kompanijos tuos duomenis nuo jų nuslėpė,

But the companies withheld that data from them.

So did the European Medicines Agency --

tą patį darė ir Europos vaistų agentūra

trejetą metų.

for three years.

This is a problem that is currently lacking a solution.

Ši problema kol kas yra neišspręsta.

And to show how big it goes, this is a drug called Tamiflu,

Kad parodyčiau kokio ji masto - štai vaistas "Tamiflu",

which governments around the world

kuriam viso pasaulio vyriausybės

have spent billions and billions of dollars on.

išleido milijardų milijardus dolerių.

Ir jie už tuos pinigus pirko pažadą,

And they spend that money on the promise that this is a drug

kad šis vaistas sumažins

which will reduce the rate of complications with flu.

gripo komplikacijų rodiklį.

Mes jau turime duomenų,

We already have the data

showing it reduces the duration of your flu by a few hours.

rodančių, kad jis sumažina jūsų gripo trukmę keliomis valandomis.

Bet man tai iš tiesų nerūpi. Vyriausybėms tai nerūpi.

But I don't care about that, governments don't care.

Man labai gaila, jei sergate gripu. Žinau, tai siaubinga,

I'm sorry if you have the flu, I know it's horrible,

bet neketiname išleisti milijardus dolerių,

but we're not going to spend billions of dollars

bandydami sutrumpinti jūsų gripo simptomų trukmę

trying to reduce the duration of your flu symptoms by half a day.

puse dienos.

We prescribe these drugs.

Mes išrašome šiuos vaistus, kaupiame juos nelaimių atvejams,

We stockpile them for emergencies

vadovaudamiesi tuo, kad jie sumažins skaičių komplikacijų,

on the understanding they'll reduce the number of complications,

tokių kaip plaučių uždegimas, mirtis.

which means pneumonia and death.

Infekcinių ligų Cochrane grupė, kuri yra įsikūrusi Italijoje,

The infectious diseases Cochrane Group, which are based in Italy,

bandė gauti

has been trying to get the full data in a usable form

visus susistemintus duomenis iš vaistų kompanijų

out of the drug companies,

tam, kad galėtų nuspręsti,

so they can make a full decision

about whether this drug is effective or not,

ar vaistas efektyvus, ar ne.

and they've not been able to get that information.

Ir tos informacijos gauti jiems nepavyko.

This is undoubtedly the single biggest ethical problem

Tai, be abejo,

viena didžiausių etikos problemų,

facing medicine today.

su kuriomis medicina susiduria šiandien.

Mes negalime priimti sprendimų,

We cannot make decisions in the absence of all of the information.

stokodami visos informacijos.

So it's a little bit difficult from there

Gana sunku po viso to

to spin in some kind of positive conclusion.

įpinti kokią nors teigiamą išvadą.

Bet noriu pasakyti štai ką:

But I would say this:

I think that sunlight

manau, kad saulės šviesa

is the best disinfectant.

yra geriausia dezinfekcijos priemonė.

Visi šie dalykai vyksta akivaizdžiai,

All of these things are happening in plain sight,

and they're all protected by a force field of tediousness.

ir juos visus saugo

varginantis jėgos laukas.

And I think, with all of the problems in science,

Aš manau, kai moksle tiek problemų,

geriausia, ką galime padaryti,

one of the best things that we can do

is to lift up the lid, finger around at the mechanics

yra pakelti dangtį,

apčiupinėti viską ir įdėmiai pasižvalgyti.

and peer in.

Labai ačiū.

Thank you very much.

(Applause)

(Plojimai)