Are You Really As Good at Something As You Think? | Robin Kramer | TED

Translator: Luz Leirós Reviewer: traduceTED USC

I don't mean to brag,

Non é por presumir,

but there are lots of things that I'm pretty average at.

pero hai moitas cousas que non se me dan mal:

From playing table tennis,

xogar ao tenis de mesa,

cooking risotto, finding countries on a map,

cociñar risotto ou atopar países nun mapa,

just to name a few.

só por citar algunhas.

Now, in our everyday lives,

Agora ben, na nosa vida cotiá,

ninguén adoita avaliar as nosas habilidades e capacidades,

we're not typically assessed on our skills and abilities,

so we're forced to rely on our own judgments.

polo que debemos confiar no noso propio xuízo.

I may think I'm pretty decent with Italian cuisine,

Eu podo pensar que se me dá bastante ben a cociña italiana,

but how accurate is my assessment?

pero como de precisa é a miña valoración?

Now, what we’re talking about here is metacognition:

Aquí estamos a falar de metacognición:

our insight into our own thought processes.

a nosa percepción dos nosos procesos de pensamento.

If I have good metacognitive insight,

Se teño unha boa percepción metacognitiva,

then how good I think I am at a particular task

o ben que creo que se me dá unha tarefa en particular

should line up pretty well with how good I actually am.

debería coincidir bastante co ben que se me dá realmente.

Of course, in the real world this is often not the case.

Por suposto, no mundo real, moitas veces non é así.

And indeed, we probably all know someone

De feito, probablemente todos coñecemos alguén

who thinks they're great at navigating maps,

que pensa que se lle dá xenial ler mapas,

when in fact the reality is often the opposite.

cando, de feito, a realidade adoita ser a contraria.

Not to name any names, of course, but still.

Non imos dar nomes, por suposto,

pero aínda así.

Perhaps you think this applies to other people

Igual pensades que isto se aplica a outras persoas

and that you, yourself, wouldn't make this sort of mistake.

e que vós non cometeriades este tipo de erros.

So let's try a quick experiment.

Probemos un experimento rápido.

I want you to think about how you would rate yourself

Quero que pensedes en como valorariades

in terms of your driving ability.

a vosa capacidade de conducir.

Would you rate yourself as below average, average

Clasificariádela como por debaixo da media, na media

or perhaps even above average?

ou quizais mesmo por riba da media?

So most people rate themselves as above average,

A maioría da xente clasifícaa como por riba da media,

which, of course, is mathematically impossible,

o cal, por suposto, é matematicamente imposible

and something that we call the "better than average" effect.

e algo que chamamos o efecto “mellor que a media”.

This is just one of a number of cognitive biases that we see

Este é só un dos moitos nesgos cognitivos que atopamos

when people judge their own abilities.

cando a xente xulga as súas propias capacidades.

Today, I'm going to focus on a related bias,

Hoxe, voume centrar nun nesgo relacionado,

the Dunning-Kruger effect.

o efecto Dunning-Kruger.

So back in 1999,

Volvamos a 1999.

two psychologists at Cornell University, Dunning and Kruger,

Dous psicólogos da Universidade de Cornell, Dunning e Kruger,

described the mistakes people make when estimating their own abilities.

describiron os erros que comete a xente cando estima as súas propias capacidades.

So if we take a sample of people and we divide them into four groups

Para iso, tomamos unha mostra de persoas e dividímola en catro grupos

based on their scores on a test,

baseándonos na súa puntuación nunha proba

and order those groups from lowest to highest.

e ordenamos eses grupos de menor a maior.

If we plot those scores on a graph along with their self-estimates,

Se representamos esas puntuacións nun gráfico

xunto coas súas autoestimacións

so how well they thought they did on the test,

do ben que pensaban que fixeran a proba,

this is the pattern that we see.

este é o patrón que vemos.

So the red line is a steep slope representing their actual scores.

A liña vermella ten unha forte pendente que representa

as puntuación reais.

As it must be, since we ordered the groups

Como debe ser, xa que ordenamos os grupos

based on their scores in the first place.

segundo as súas puntuacións.

Now what's interesting is the blue shallower line.

Agora o interesante é a liña azul menos inclinada.

This represents their self-estimates.

Esta representa as súas autoestimacións,

So, how good they thought they did on the test.

isto é, o ben que pensaban que fixeran a proba.

Now the Dunning-Kruger effect describes how the weakest performers

O efecto Dunning-Kruger describe como os suxeitos de peor rendemento

significantly overestimate their performance,

sobreestiman significativamente os seus resultados.

shown here in the green oval.

Podémolo ver aquí no óvalo verde.

The explanation for this, according to Dunning and Kruger,

A explicación disto, segundo Dunning e Kruger,

is that insight and ability rely on the same thing.

é que percepción e capacidade dependen do mesmo.

So if I'm poor at a task,

Se son mediocre nunha tarefa,

I also lack the metacognitive insight to accurately assess my ability.

tamén carezo da percepción metacognitiva

para avaliar con precisión a miña capacidade.

Now this pattern has been seen again and again

Agora ben, este patrón repítese unha e outra vez

across a number of domains,

en varios campos, desde a habilidade de conducir

from driving skill to exam-taking, even chess-playing.

ata facer exames, incluso xogar ao xadrez.

However, in recent years,

Non obstante, nos últimos anos,

a number of criticisms have been leveled at this approach,

formuláronse varias críticas a este enfoque

and we now have reason to believe

e agora temos motivos para crer

that this pattern results is virtually unavoidable.

que este patrón resulta practicamente inevitable.

One reason for this is the statistical effect,

Unha razón é o efecto estatístico

regression to the mean.

de regresión á media.

Now this is something that comes about

Ben, isto é algo que xorde

cando temos dúas medidas que están relacionadas, pero non perfectamente.

when we have two measures that are related but not perfectly so.

So imagine we have a sample of people

Imaxinade que temos unha mostra de persoas

and we measure their heights and their weights.

e medimos a súa estatura e o seu peso.

Now height and weight are related,

Altura e peso están relacionados;

tall people are typically heavier,

as persoas altas adoitan pesar máis,

but the relationship is far from perfect.

pero a relación dista moito de ser perfecta.

So unlike in the figure at the top here,

Polo tanto, ao contrario da figura superior,

the shortest people in red won't all be the lightest people.

as persoas máis baixas en vermello non serán todas as persoas máis lixeiras.

Some of them will be overweight or particularly muscular, for example.

Algunhas, por exemplo, terán sobrepeso ou serán especialmente musculosas.

Similarly at the top end,

Do mesmo xeito, no extremo superior,

the tallest people in blue won't all be the heaviest people.

as persoas máis altas en azul non serán todas as que máis pesen.

Some of them will be underweight, and so on.

Algunhas estarán baixas de peso etc.

Now as a result, on average,

Agora, como resultado, de media,

the shortest people will rank higher for weight than they do for height,

as persoas máis baixas puntuarán máis alto en peso que en altura

and the tallest people will rank lower for weight than they do for height

e as persoas más altas puntuarán máis baixo en peso que en altura,

producing this blue line here

o que dará ligar a esta liña azul

and the crossover pattern you're now becoming familiar with.

e ao padrón cruzado co que vos estades a familiarizar.

Now, some people might put forward a spurious explanation

Agora ben, algunhas persoas poden dar unha explicación espuria

for why short people are relatively overweight

de por que as persoas baixas parecen ter sobrepeso

or tall people relatively underweight,

ou as persoas altas semellan ter baixo peso,

when in fact no explanation is needed.

cando de feito non se necesita ningunha explicación.

Perhaps more compelling a reason to doubt the Dunning-Kruger effect

Quizais unha razón máis convincente para dubidar do efecto Dunning-Kruger

is that we can produce the same pattern in our data

é que podemos producir o mesmo padrón nos nosos datos

when our data is entirely meaningless.

cando carecen de sentido.

So if we collect people's test scores

Así, se recollemos as puntuacións das probas das persoas

along with their self-estimates of those scores,

xunto coas súas autoestimacións das puntuacións,

but then we shuffle those self-estimates

pero despois barallamos esas autoestimacións

and then analyze as before,

e as analizamos como antes,

then we still find that same pattern in the data.

atoparemos o mesmo padrón nos datos.

Of course, any effect that we can find

Por suposto, calquera efecto que poidamos atopar

with shuffled or randomized data

con datos aleatorios ou reorganizados

is one that we should surely be suspicious of.

é un dos que, seguramente, deberiamos desconfiar.

So, given these and other issues with the Dunning-Kruger approach,

Tendo en conta estes e outros problemas do enfoque Dunning-Kruger,

I was saddened and disappointed

quedei triste, decepcionado

and, frankly, a little annoyed to discover

e, francamente, un pouco molesto ao descubrir

that the same approach was now being applied

que o mesmo enfoque se estaba aplicando agora

in my field of expertise,

no meu campo de especialización,

which is face-matching.

o emparellamento de caras.

Now, this is a task where we're showing two images of faces

Trátase dunha tarefa na que amosamos dúas imaxes de caras

or an image and a live person,

ou unha imaxe e unha persoa en vivo

and we're asked to decide whether they show the same person

e pedimos que decidan se son a mesma persoa

ou dúas persoas diferentes.

or two different people.

Now, we've all stood in line at passport control,

Todos estivemos na cola do control de pasaportes,

anxiously awaiting the passport officer's decision

esperando ansiosamente a decisión do axente de pasaportes

as to whether our ID photos look sufficiently like us or not.

sobre se as fotos do noso documento se parecen o suficiente a nós ou non.

Indeed, I've included at the top here

De feito, incluín aquí enriba

some examples of ID images from my own life,

exemplos de imaxes de documentos de identidade meus,

just to illustrate some variability.

só para mostrar algo de variabilidade.

Some proud moments in photographic history,

Momentos de orgullo na historia da fotografía,

I'm sure you'll agree.

estaredes de acordo.

And so what I'd like to do now

O que me gustaría facer agora

is first see how well you might perform as passport officers.

é, primeiro, ver que tal o facedes como axentes de pasaportes.

So here are four pairs of images,

Aquí tedes catro pares de imaxes,

some students’ ID images and some student photos.

imaxes de documentación de estudantes e fotos de estudantes.

For each pair, I'd like you to decide whether it's a match,

Para cada parella, gustaríame que decidades se coinciden,

so two images of the same person,

é dicir, se son imaxes da mesma persoa,

or a mismatch,

ou se non coinciden e son imaxes de persoas diferentes.

two images of different people.

Some of you might be surprised to hear that the top two pairs are matches,

Quizais vos sorprenda saber que os dous pares superiores coinciden,

so images of the same people,

son imaxes das mesmas persoas,

and the bottom two pairs show mismatches,

e os dous inferiores non,

so two different people.

así que son persoas diferentes.

Now we know this task is particularly difficult

Agora sabemos que esta tarefa é particularmente difícil

when the images show identities that we're unfamiliar with.

cando as imaxes mostran identidades que non coñecemos.

This is because it's hard to take into account the changes

Isto débese a que é difícil ter en conta os cambios

that can happen to the face across time,

que poden ocorrer na cara ao longo do tempo,

as well as over different situations,

así como en diferentes situacións,

so changes in facial expression or lighting, for instance.

por cambios na expresión facial ou na iluminación, por exemplo.

We know this task is difficult for passport officers as well,

Sabemos que esta tarefa tamén é difícil para os axentes de pasaportes

and they also make mistakes.

e que tamén cometen erros.

So this is why I thought it would be particularly interesting

Por iso pensei que sería especialmente interesante

to look at the relationship between insight and ability

analizar a relación entre percepción e capacidade

in this important security context.

neste importante contexto da seguridade.

So given the issues we’ve described already

Dados os problemas xa descritos

with looking at overall scores and people’s self-estimates,

ao analizar as puntuacións xerais e as autoestimacións,

I instead decided to focus on individual decision making.

decidín centrarme mellor na toma de decisións individuais.

So over a series of experiments,

Así, durante unha serie de experimentos,

I asked people to look at pairs of images

pedinlle á xente que observase pares de imaxes

and decide whether they were a match or a mismatch.

e decidisen se coincidían ou non.

But I also asked people to provide a rating of confidence in each decision.

Porén, tamén lles pedín unha valoración da súa confianza en cada decisión.

Now a good metacognitive insight

Unha boa percepción metacognitiva

would be reflected in people being much more confident

reflectiríase en que a xente tería máis confianza

in decisions that turned out to be correct

nas decisións que resultasen correctas

and much less confident in decisions that turned out to be incorrect.

e menos confianza nas decisións que resultasen erróneas.

So let's have a look at how people did.

Vexamos como o fixo a xente.

Now I think this pattern is particularly fascinating,

Creo que este padrón é especialmente fascinante,

but also fairly intuitive.

pero tamén bastante intuitivo.

Let's start with the red line,

Comecemos pola liña vermella,

which represents people's confidence in their incorrect responses.

que representa a confianza das persoas nas súas respostas incorrectas.

So as you can see,

Como podedes ver,

it doesn't matter how good people were at the test overall,

non importa o ben que o fixese a xente na proba en xeral,

represented by the score on the X-axis at the bottom there;

representado pola puntuación no eixe X na parte inferior;

people were approximately the same

as persoas eran máis ou menos iguais

in terms of their confidence when they were incorrect.

en canto a súa confianza cando se equivocaban.

Now what's interesting is the blue line,

O interesante é a liña azul

which represents confidence when people were correct in their decisions.

que representa a confianza cando a xente tomaba decisións correctas.

As you can see, the best performers on the test

Como podedes ver, os que facían mellor a proba

were much more confident in their correct responses

tiñan moita máis confianza nas súas respostas correctas

in comparison with their incorrect ones.

que nas súas respostas incorrectas,

So shows good metacognitive insight.

o que amosa unha boa percepción metacognitiva.

The weakest performers, on the other hand,

Os participantes peores, pola contra,

non amosaban diferenzas na súa confianza

were no different in their confidence

for their correct and incorrect responses,

entre respostas correctas e incorrectas,

shown here in the green circle.

como vemos aquí no círculo verde.

And so they show poor metacognitive insight.

Polo tanto, mostran unha mala percepción metacognitiva.

So what might be going on with these weak performers?

Que pasa logo con estes participantes mediocres?

Now it could be the case that they have some sense

Podería ser que sintan

they tend to perform poorly on tests in general,

que non se lles adoitan dar ben as probas

and so they're just less confident overall in their responses.

polo que confían menos nas súas respostas en xeral.

However, I didn't find that pattern of lower confidence in my data,

Non obstante, non atopei ese padrón de menor confianza nos meus datos,

at least with individual decision-making.

polo menos na toma de decisións individual.

Instead, it's more likely that they were more confident in their correct responses

En vez diso, é máis probable que estivesen menos seguros das súas respostas correctas

in comparison with their incorrect ones.

en comparación coas incorrectas.

But this was simply unrelated to their accuracy on each trial

Pero isto simplemente non se relacionaba coa súa precisión en cada proba

because they had poor insight.

porque tiñan unha mala percepción.

So how does this all fit in with the Dunning-Kruger effect?

Entón, como encaixa todo isto co efecto Dunning-Kruger?

So Dunning and Kruger argued that the weakest performers

Dunning e Kruger argumentaban que os que tiñan peor rendemento

show the least amount of insight

mostran a menor cantidade de percepción

and they overestimated their performance.

e sobreestiman o seu rendemento.

And that's implied that they had greater confidence.

Iso implica que teñen maior confianza.

Now, we didn't see that here in our data.

Mais iso non o vimos nos nosos datos.

The weakest performers didn't seem to be overly confident.

Os peores participantes non parecían estar demasiado seguros.

However, the Dunning-Kruger effect

Porén, o efecto Dunning-Kruger

also describes how insight depends on ability.

tamén describe como a percepción depende da capacidade.

And so the weakest performers showed the least amount of insight,

Así, os peores participantes mostraron a cantidade mínima de percepción,

overestimating their performance in their case.

e sobreestimaron o seu rendemento no seu caso.

As we've just seen,

Como acabamos de ver,

the weakest performers do seem to show the least amount of insight.

os peores participantes parecen mostrar a percepción mínima.

Here, they couldn't differentiate between their correct and incorrect responses.

Non podían diferenciar as súas respostas correctas e incorrectas.

So insight does appear to depend on ability,

Polo tanto, a percepción parece depender da capacidade,

but not in the way that Dunning and Kruger originally thought.

pero non do xeito que pensaban Dunning e Kruger orixinalmente.

So if there are two things I'd like you to remember from this talk

Hai dúas cousas que me gustaría que lembrásedes desta charla

and take home, think about afterwards,

e que as levásedes para a casa para pensalas despois.

they are: first, more broadly, science is always updating.

Primeiro, de xeito máis amplo: a ciencia sempre se actualiza.

Research comes along, new evidence that may contradict

Achéganse investigacións, novas probas que poden contradicir

or even disprove previous work.

ou mesmo desmentir traballos previos.

In this case, the Dunning-Kruger effect may well not be a thing,

Neste caso, o efecto Dunning-Kruger ben podería non existir,

despite the fact that it's so prevalent in popular culture.

a pesar de ser tan frecuente na cultura popular.

Second, insight depends on ability.

Segundo: a percepción depende da capacidade.

For the weakest performers,

Para os peores participantes,

there's no difference between their confidence

non hai diferenza entre a súa confianza

for correct and incorrect responses.

nas respostas correctas e incorrectas.

They have poor insight, they can't tell the difference.

Teñen unha percepción pobre, non notan a diferenza.

For strong performers,

Para os bos participantes,

when they're giving a correct answer,

cando dan unha resposta correcta,

they're much more confident.

están moito máis seguros.

Of course, the inverse isn't always true.

Por suposto, o contrario non sempre é certo.

Being more confident doesn't mean that you're right.

Ter máis confianza non significa que teñas razón.

You might be wrong and simply have poor insight.

Podes equivocarte e, simplemente, ter una visión pobre.

So in our everyday lives,

Polo tanto, na vosa vida cotiá,

you should think about who it is that you ask the opinions of.

deberiades pensar quen é a persoa á que lle pedides opinión.

If someone is an expert in their field,

Se alguén é especialista no seu campo

then if they're more confident, they're probably right,

e está máis seguro, probablemente teña razón,

but if they're unsure,

pero se non está seguro,

this is also informative and tells us something useful.

isto tamén é informativo e indícanos algo útil.

It's much more sensible to find someone that we know is knowledgeable in an area,

É moito máis sensato confiar en alguén que sabemos que coñece unha área

rather than someone who is simply confident in their opinion,

en lugar de alguén que simplemente confía na súa opinión,

because confidence is easily misplaced.

porque a confianza pode levar a engano.

And finally,

Finalmente,

aqueles de vós que aínda vos preguntades

for those of you who are still wondering how good my risotto actually is,

como está o meu risotto en realidade,

that may have to wait for a future talk.

ides ter que esperar a unha próxima charla.

Thank you.

Grazas.

(Applause)

(Aplausos)