3 ways to spot a bad statistic | Mona Chalabi

Traducător: Lorena Ciutacu Corector: Mihaida Meila

I'm going to be talking about statistics today.

Azi voi vorbi despre statistică.

If that makes you immediately feel a little bit wary, that's OK,

Dacă asta vă face imediat să vă simțiți un pic nesiguri, e OK,

that doesn't make you some kind of crazy conspiracy theorist,

nu vă face un adept nebun al teoriilor conspirației,

it makes you skeptical.

ci un sceptic.

And when it comes to numbers, especially now, you should be skeptical.

Când vine vorba de numere, mai ales acum, ar trebui să fiți sceptici.

But you should also be able to tell which numbers are reliable

Dar ar trebui și să puteți spune care numere sunt de încredere

and which ones aren't.

și care nu sunt.

So today I want to try to give you some tools to be able to do that.

Azi vreau să vă ofer niște metode pentru a putea face asta.

But before I do,

Înainte să încep,

I just want to clarify which numbers I'm talking about here.

vreau să clarific despre ce numere vorbesc aici.

I'm not talking about claims like,

Nu vorbesc despre afirmații ca:

"9 out of 10 women recommend this anti-aging cream."

„9 din 10 femei recomandă crema anti-îmbătrânire”.

I think a lot of us always roll our eyes at numbers like that.

Cred că mulți dintre noi dau ochii peste cap la asta.

What's different now is people are questioning statistics like,

Dar acum oamenii pun la îndoială statistici precum

"The US unemployment rate is five percent."

„Rata de șomaj în SUA e de 5%”.

What makes this claim different is it doesn't come from a private company,

Această afirmație e specială deoarece nu vine de la o companie privată,

it comes from the government.

ci de la guvern.

About 4 out of 10 Americans distrust the economic data

Aproximativ 4 din 10 americani nu au încredere în datele economice

that gets reported by government.

raportate de guvern.

Among supporters of President Trump it's even higher;

Printre suporterii președintelui Trump rata e și mai mare,

it's about 7 out of 10.

aproximativ 7 din 10.

I don't need to tell anyone here

Nu e nevoie să vă spun

that there are a lot of dividing lines in our society right now,

că sunt multe linii diviziblile în societatea noastră chiar acum,

and a lot of them start to make sense,

multe dintre ele încep să aibă sens

once you understand people's relationships with these government numbers.

odată ce înțelegeți relațiile oamenilor cu numerele emise de guvern.

On the one hand, there are those who say these statistics are crucial,

De o parte sunt cei care spun că aceste statistici sunt importante,

that we need them to make sense of society as a whole

că avem nevoie de ele ca să explicăm întreaga societate,

in order to move beyond emotional anecdotes

să trecem peste anecdote emoționale

and measure progress in an [objective] way.

și să măsurăm progresul obiectiv.

And then there are the others,

Apoi sunt alții care spun

who say that these statistics are elitist,

că aceste statistici sunt elitiste,

maybe even rigged;

poate chiar măsluite,

they don't make sense and they don't really reflect

nu au sens și nu reflectă ce se întâmplă

what's happening in people's everyday lives.

în viețile cotidiene ale oamenilor.

It kind of feels like that second group is winning the argument right now.

Se pare că acum al doilea grup câștigă dezbaterea.

We're living in a world of alternative facts,

Trăim într-o lume a faptelor alternative,

where people don't find statistics this kind of common ground,

unde oamenii nu văd statisticile ca un teren comun,

this starting point for debate.

punctul de plecare pentru dezbatere.

This is a problem.

Asta e o problemă.

There are actually moves in the US right now

Acum sunt mișcări în SUA

to get rid of some government statistics altogether.

pentru a renunța de tot la niște statistici guvernamentale.

Right now there's a bill in congress about measuring racial inequality.

Acum în guvern e un proiect de lege despre măsurarea inegalității rasiale,

The draft law says that government money should not be used

care spune că banii guvernului nu ar trebui folosiți

pentru colectarea datelor despre segregarea rasială.

to collect data on racial segregation.

This is a total disaster.

E un dezastru.

If we don't have this data,

Dacă nu avem aceste date,

how can we observe discrimination,

cum putem observa discriminarea,

let alone fix it?

și să o mai și rezolvăm?

In other words:

Cu alte cuvinte:

How can a government create fair policies

cum poate un guvern crea politici corecte

if they can't measure current levels of unfairness?

dacă nu poate măsura nivelul actual de nedreptate?

This isn't just about discrimination,

Nu e vorba doar de discriminare,

it's everything -- think about it.

ci despre tot — gândiți-vă.

How can we legislate on health care

Cum putem legifera sistemul de sănătate

if we don't have good data on health or poverty?

dacă nu avem date bune despre sănătate sau sărăcie?

How can we have public debate about immigration

Cum putem avea dezbateri publice despre imigrație

if we can't at least agree

dacă nici nu putem stabili

on how many people are entering and leaving the country?

câți oameni intră și ies din țară?

Statistics come from the state; that's where they got their name.

Statisticile vin de la stat, de acolo provine numele.

The point was to better measure the population

Ideea era să măsoare mai bine populația

in order to better serve it.

ca să o servească mai bine.

So we need these government numbers,

Deci avem nevoie de cifrele de la guvern,

but we also have to move beyond either blindly accepting

dar nu trebuie să le mai acceptăm sau să le respingem orbește.

or blindly rejecting them.

We need to learn the skills to be able to spot bad statistics.

Trebuie să învățăm metode pentru a recunoaște statistici incorecte.

I started to learn some of these

Eu am început să le învăț

when I was working in a statistical department

când lucram într-un departament de statistică

that's part of the United Nations.

din cadrul Națiunilor Unite.

Our job was to find out how many Iraqis had been forced from their homes

Noi trebuia să aflăm câți irakieni au fost forțați să-și părăsească casa

as a result of the war,

din cauza războiului

and what they needed.

și de ce aveau nevoie.

It was really important work, but it was also incredibly difficult.

Era o muncă foarte importantă, dar și dificilă.

Every single day, we were making decisions

În fiecare zi luam decizii

that affected the accuracy of our numbers --

care afectau precizia numerelor noastre,

decisions like which parts of the country we should go to,

de exemplu în ce părți ale țării ar trebui să mergem,

who we should speak to,

cu cine să vorbim,

which questions we should ask.

ce întrebări să punem.

And I started to feel really disillusioned with our work,

Am început să mă simt dezamăgită de munca noastră

because we thought we were doing a really good job,

deoarece credeam că facem o treabă bună,

but the one group of people who could really tell us were the Iraqis,

dar singurii oameni care ne puteau spune asta erau irakienii,

and they rarely got the chance to find our analysis, let alone question it.

iar ei abia găseau analiza noastră, cu atât mai puțin s-o pună la îndoială.

So I started to feel really determined

Asta m-a determinat să cred

that the one way to make numbers more accurate

că unicul mod de a face numerele mai precise

is to have as many people as possible be able to question them.

e să fie puse la îndoială de cât mai mulți oameni.

So I became a data journalist.

Așa am devenit jurnalist de date.

My job is finding these data sets and sharing them with the public.

Treaba mea e să găsesc datele și să le împărtășesc publicului.

Anyone can do this, you don't have to be a geek or a nerd.

Oricine poate face asta, nu e nevoie să fii un tocilar.

You can ignore those words; they're used by people

Puteți ignora cuvântul ăsta, e folosit de cei care încearcă

trying to say they're smart while pretending they're humble.

să spună că sunt deștepți încercând să pară modești.

Absolutely anyone can do this.

Chiar oricine poate face asta.

I want to give you guys three questions

Vreau să vă dau trei întrebări care vă vor ajuta

that will help you be able to spot some bad statistics.

să recunoașteți statistici incorecte.

So, question number one is: Can you see uncertainty?

Prima întrebare: Vedeți incertitudini?

One of things that's really changed people's relationship with numbers,

Un lucru care a schimbat relația oamenilor cu numerele

and even their trust in the media,

și încrederea lor în media

has been the use of political polls.

a fost sondajul politic.

I personally have a lot of issues with political polls

Eu personal am multe probleme cu sondajele politice

because I think the role of journalists is actually to report the facts

deoarece cred că rolul jurnaliștilor e să raporteze faptele,

and not attempt to predict them,

nu să încerce să le prezică,

especially when those predictions can actually damage democracy

mai ales când prezicerile pot deteriora democrația,

by signaling to people: don't bother to vote for that guy,

sugerând oamenilor:

„Nu votați pentru el, n-are nicio șansă”.

he doesn't have a chance.

Let's set that aside for now and talk about the accuracy of this endeavor.

Să lăsăm asta deoparte și să vorbim despre precizia acestui efort.

Based on national elections in the UK, Italy, Israel

Pe baza alegerilor naționale în Anglia, Italia, Israel

and of course, the most recent US presidential election,

și bineînțeles, cel mai recent în SUA,

using polls to predict electoral outcomes

folosirea sondajelor pentru a prezice rezultatele electorale

is about as accurate as using the moon to predict hospital admissions.

e la fel de precisă ca folosirea lunii pentru a prezice admiterile în spitale.

No, seriously, I used actual data from an academic study to draw this.

Serios, am folosit date dintr-un studiu academic să desenez asta.

There are a lot of reasons why polling has become so inaccurate.

Sunt multe motive pentru care sondajele au devenit atât de imprecise.

Our societies have become really diverse,

Societățile s-au diversificat,

which makes it difficult for pollsters to get a really nice representative sample

așa că e mai dificil pentru sondatori să găsească un eșantion reprezentativ

of the population for their polls.

din populație pentru sondaje.

People are really reluctant to answer their phones to pollsters,

Oamenii evită să răspundă la apelurile sondatorilor

and also, shockingly enough, people might lie.

și, șocant, ar putea minți.

But you wouldn't necessarily know that to look at the media.

Dar nu ați ști asta din media.

For one thing, the probability of a Hillary Clinton win

Probabilitatea ca Hillary Clinton să câștige alegerile

was communicated with decimal places.

a fost comunicată cu zecimale.

We don't use decimal places to describe the temperature.

Nu folosim zecimale nici să descriem temperatura.

How on earth can predicting the behavior of 230 million voters in this country

Cum se poate să fie comportamentul a 230 de milioane de votanți

be that precise?

prezis cu așa precizie?

And then there were those sleek charts.

Apoi au fost graficele acelea impecabile.

See, a lot of data visualizations will overstate certainty, and it works --

Vizualizarea datelor va exagera certitudinea, și funcționează:

these charts can numb our brains to criticism.

aceste grafice ne pot bloca simțul critic.

When you hear a statistic, you might feel skeptical.

Când auziți o statistică, fiți sceptici.

As soon as it's buried in a chart,

Când e ascunsă într-un grafic

it feels like some kind of objective science,

pare o știință obiectivă,

and it's not.

dar nu e.

So I was trying to find ways to better communicate this to people,

Am încercat să găsesc moduri de a comunica asta oamenilor,

to show people the uncertainty in our numbers.

să le arăt incertitudinile din numerele noastre.

What I did was I started taking real data sets,

Am început să iau date reale

and turning them into hand-drawn visualizations,

și să le transform în vizualizări desenate de mână

so that people can see how imprecise the data is;

pentru ca oamenii să vadă cât de imprecise sunt datele,

so people can see that a human did this,

să vadă că un om a făcut asta,

a human found the data and visualized it.

un om a găsit datele și le-a reprezentat grafic.

For example, instead of finding out the probability

De exemplu, în loc să aflați

of getting the flu in any given month,

probabilitatea de a lua gripă într-o anumită lună,

you can see the rough distribution of flu season.

puteți vedea distribuția sezonului de răceală.

This is --

Asta nu e...

(Laughter)

a bad shot to show in February.

(Râsete)

o imagine bună pentru februarie.

But it's also more responsible data visualization,

Dar e o vizualizare de date mai responsabilă

because if you were to show the exact probabilities,

deoarece dacă ar arăta probabilitățile exacte,

maybe that would encourage people to get their flu jabs

poate i-ar încuraja pe oameni să ia medicamente de răceală

at the wrong time.

la momentul nepotrivit.

The point of these shaky lines

Ideea acestor linii tremurânde

is so that people remember these imprecisions,

e să le amintească oamenilor de imprecizii

but also so they don't necessarily walk away with a specific number,

ca să nu rămână cu un anumit număr în minte,

but they can remember important facts.

ci să-și amintească fapte importante.

Facts like injustice and inequality leave a huge mark on our lives.

Fapte ca nedreptatea și inegalitatea lasă o urmă imensă în viețile noastre.

Facts like Black Americans and Native Americans have shorter life expectancies

Fapte precum speranța de viață mai redusă a afro-americanilor și amerindienilor

than those of other races,

în comparație cu alte rase,

and that isn't changing anytime soon.

și asta nu se va schimba curând.

Facts like prisoners in the US can be kept in solitary confinement cells

Fapte precum reținerea prizonerilor în SUA în celule de izolare

that are smaller than the size of an average parking space.

mai mici decât un loc de parcare mediu.

The point of these visualizations is also to remind people

Ideea acestor vizualizări e să le amintească oamenilor

of some really important statistical concepts,

de concepte importante de statistică,

concepts like averages.

precum media.

So let's say you hear a claim like,

Să zicem că auziți o afirmație:

"The average swimming pool in the US contains 6.23 fecal accidents."

„Bazinul de înot mediu în SUA conține 6,23 accidente fecale.”

That doesn't mean every single swimming pool in the country

Asta nu înseamnă că fiecare bazin din țară

contains exactly 6.23 turds.

conține exact 6,23 rahați.

So in order to show that,

Ca să arăt asta,

I went back to the original data, which comes from the CDC,

am luat datele originale de la CDC,

who surveyed 47 swimming facilities.

care au studiat 47 de bazine,

And I just spent one evening redistributing poop.

și am petrecut o seară redistribuind rahat.

So you can kind of see how misleading averages can be.

Vedeți cât de derutante pot fi mediile.

(Laughter)

(Râsete)

OK, so the second question that you guys should be asking yourselves

A doua întrebare pe care ar trebui s-o puneți

to spot bad numbers is:

să recunoașteți numere greșite:

Can I see myself in the data?

Pot să mă văd pe mine în date?

This question is also about averages in a way,

Întrebarea asta e oarecum despre medii

because part of the reason why people are so frustrated

deoarece un motiv pentru care oamenii sunt frustrați

with these national statistics,

de statisticile naționale

is they don't really tell the story of who's winning and who's losing

e că nu spun o poveste despre cine câștigă și cine pierde

from national policy.

în politicile naționale.

It's easy to understand why people are frustrated with global averages

E ușor de înțeles de ce oamenii sunt frustrați de medii globale

when they don't match up with their personal experiences.

când nu se potrivesc cu experiențele lor.

I wanted to show people the way data relates to their everyday lives.

Am vrut să arăt oamenilor ce rol au datele în viața cotidiană.

I started this advice column called "Dear Mona,"

Am inițiat coloana de consiliere „Dragă Mona”,

where people would write to me with questions and concerns

unde oamenii îmi scriau întrebări și probleme,

and I'd try to answer them with data.

iar eu încercam să răspund cu date.

People asked me anything.

Oamenii mă întrebau de toate:

questions like, "Is it normal to sleep in a separate bed to my wife?"

„E normal ca eu și soția mea să dormim paturi separate?”

"Do people regret their tattoos?"

„Își regretă oamenii tatuajele?”,

"What does it mean to die of natural causes?"

„Ce înseamnă să mori din cauze naturale?”.

All of these questions are great, because they make you think

Toate întrebările sunt grozave deoarece te fac să te gândești

about ways to find and communicate these numbers.

la moduri de a găsi și a comunica aceste numere.

If someone asks you, "How much pee is a lot of pee?"

Dacă cineva vă întreabă „Cât pipi e mult pipi?”,

which is a question that I got asked,

am primit întrebarea asta,

you really want to make sure that the visualization makes sense

vreți să fiți siguri că vizualizarea are sens

to as many people as possible.

pentru cât mai mulți oameni.

These numbers aren't unavailable.

Acest numere sunt disponibile.

Sometimes they're just buried in the appendix of an academic study.

Uneori sunt ascunse în apendicele unui studiu academic.

And they're certainly not inscrutable;

Nu sunt enigmatice,

if you really wanted to test these numbers on urination volume,

dacă vreți să testați numerele pentru volumul urinei,

you could grab a bottle and try it for yourself.

puteți să luați o sticlă și să încercați.

(Laughter)

(Râsete)

The point of this isn't necessarily

Ideea nu e neapărat

that every single data set has to relate specifically to you.

ca fiecare set de date să aibă legătură cu tine.

I'm interested in how many women were issued fines in France

Mă interesează câte femei au fost amendate în Franța

for wearing the face veil, or the niqab,

pentru că purtau vălul pe față, niqab,

even if I don't live in France or wear the face veil.

deși nu locuiesc în Franța și nu port niqab.

The point of asking where you fit in is to get as much context as possible.

Scopul de a întreba unde ți-e locul e să ai cât mai mult context,

So it's about zooming out from one data point,

să privești de departe de la un punct la altul,

like the unemployment rate is five percent,

de exemplu rata șomajului e de 5%

and seeing how it changes over time,

și vezi cum se schimbă în timp,

or seeing how it changes by educational status --

sau cum se schimbă în funcție de nivelul de educație —

this is why your parents always wanted you to go to college --

de-aia părinții voștri au vrut să mergeți la facultate —

or seeing how it varies by gender.

sau cum variază în funcție de gen.

Nowadays, male unemployment rate is higher

În prezent, rata de șomaj a bărbaților

than the female unemployment rate.

e mai mare decât cea a femeilor.

Up until the early '80s, it was the other way around.

Până la începutul anilor '80 era invers.

This is a story of one of the biggest changes

Asta e o poveste despre una din cele mai mari schimbări

that's happened in American society,

în societatea americană

and it's all there in that chart, once you look beyond the averages.

și e toată în acel grafic, dacă priviți dincolo de medii.

The axes are everything;

Axele sunt totul:

once you change the scale, you can change the story.

dacă schimbi scala, schimbi povestea.

OK, so the third and final question that I want you guys to think about

A treia și ultima întrebare la care vreau să vă gândiți

when you're looking at statistics is:

când vedeți statistici:

How was the data collected?

Cum au fost colectate datele?

So far, I've only talked about the way data is communicated,

Până acum am vorbit doar despre cum sunt comunicate datele,

but the way it's collected matters just as much.

dar colectarea contează la fel de mult.

I know this is tough,

Știu că e greu,

because methodologies can be opaque and actually kind of boring,

deoarece metodologiile pot fi opace și destul de plictisitoare,

but there are some simple steps you can take to check this.

dar sunt niște pași simpli de a verifica asta.

I'll use one last example here.

Vă dau un ultim exemplu.

One poll found that 41 percent of Muslims in this country support jihad,

Un sondaj a arătat că 41% din musulmanii din această țară susțin jihadul,

which is obviously pretty scary,

ceea ce e evident înfricoșător,

and it was reported everywhere in 2015.

și a fost raportat peste tot în 2015.

When I want to check a number like that,

Când vreau să verific un număr ca ăsta,

I'll start off by finding the original questionnaire.

încep cu căutarea chestionarului original.

It turns out that journalists who reported on that statistic

Se pare că jurnaliștii care au raportat acea statistică

ignored a question lower down on the survey

au ignorat întrebarea din josul chestionarului

that asked respondents how they defined "jihad."

care întreba participanții cum definesc ei „jihad”.

And most of them defined it as,

Majoritatea l-au definit ca

"Muslims' personal, peaceful struggle to be more religious."

„Efortul personal, pașnic al musulmanilor de a fi mai religioși.”

Only 16 percent defined it as, "violent holy war against unbelievers."

Doar 16% l-au definit ca „război violent sfânt împotriva necredincioșilor”.

This is the really important point:

Asta e ideea importantă:

based on those numbers, it's totally possible

pe baza acestor numere e posibil

that no one in the survey who defined it as violent holy war

ca niciun participant care a definit „război violent sfânt”

also said they support it.

să fi spus că îl și susține.

Those two groups might not overlap at all.

Acele două grupuri poate nu se intersectează deloc.

It's also worth asking how the survey was carried out.

Trebuie să întrebăm și cum a fost condus studiul.

This was something called an opt-in poll,

Acesta a fost un sondaj la alegere,

which means anyone could have found it on the internet and completed it.

adică oricine îl putea găsi pe internet și completa.

There's no way of knowing if those people even identified as Muslim.

Nu putem ști dacă acei oameni chiar se considerau musulmani.

And finally, there were 600 respondents in that poll.

La final, 600 de persoane au răspuns la sondaj.

There are roughly three million Muslims in this country,

Sunt aproximativ trei milioane de musulmani în această țară,

according to Pew Research Center.

conform Pew Research Center.

That means the poll spoke to roughly one in every 5,000 Muslims

Astă înseamnă că sondajul a vorbit cu 1 din 5.000 de musulmani

in this country.

din această țară.

This is one of the reasons

Acesta e unul din motivele

why government statistics are often better than private statistics.

pentru care statisticile guvernamentale sunt adesea mai bune decât cele private.

A poll might speak to a couple hundred people, maybe a thousand,

Un sondaj poate avea câteva sute, poate o mie de intervievați

or if you're L'Oreal, trying to sell skin care products in 2005,

sau dacă sunteți L'Oreal și încercați să vindeți cosmetice în 2005,

then you spoke to 48 women to claim that they work.

vorbiți cu 48 de femei pentru a pretinde că produsele sunt bune.

(Laughter)

Private companies don't have a huge interest in getting the numbers right,

Companiile private nu sunt foarte interesate să aibă numere corecte,

they just need the right numbers.

le trebuie doar numerele bune.

Government statisticians aren't like that.

Statisticienii din guvern nu sunt așa.

In theory, at least, they're totally impartial,

Cel puțin teoretic, sunt imparțiali,

not least because most of them do their jobs regardless of who's in power.

pentru că majoritatea își fac treaba indiferent de cine e la putere.

They're civil servants.

Sunt funcționari publici.

And to do their jobs properly,

Ca să-și facă bine treaba,

they don't just speak to a couple hundred people.

nu doar vorbesc cu sute de oameni.

Those unemployment numbers I keep on referencing

Numerele despre șomaj pe care le-am menționat

come from the Bureau of Labor Statistics,

provin de la Biroul de Statistici de Muncă

and to make their estimates,

și ca să le aproximeze

they speak to over 140,000 businesses in this country.

vorbesc cu peste 140.000 de firme din țară.

I get it, it's frustrating.

Știu, e frustrant.

If you want to test a statistic that comes from a private company,

Dacă vreți să testați o statistică de la o companie privată,

you can buy the face cream for you and a bunch of friends, test it out,

puteți cumpăra crema de față s-o încercați cu câțiva prieteni

if it doesn't work, you can say the numbers were wrong.

și dacă n-are efect, puteți spune că numerele sunt greșite.

But how do you question government statistics?

Dar cum inspectați statistici de la guvern?

You just keep checking everything.

Verificați totul.

Aflați cum au colectat datele.

Find out how they collected the numbers.

Find out if you're seeing everything on the chart you need to see.

Aflați dacă vedeți în grafic tot ce trebuie văzut.

Dar nu renunțați în fața numerelor, pentru că dacă renunțați

But don't give up on the numbers altogether, because if you do,

vom lua decizii despre politici publice pe întuneric,

we'll be making public policy decisions in the dark,

ghidându-ne doar după interesele personale.

using nothing but private interests to guide us.

Thank you.

Mulțumesc.

(Aplauze)

(Applause)