Should we get rid of standardized testing? - Arlo Kempf

Tradutor: Elisa Santos Revisor: Claudia Sander

Os primeiros exames padronizados de que temos conhecimento

The first standardized tests that we know of

were administered in China over 2,000 years ago

foram aplicados na China há mais de 2 mil anos,

during the Han dynasty.

durante a Dinastia Han.

Chinese officials used them to determine aptitude for various government posts.

Funcionários chineses os usavam para determinar a aptidão

para vários cargos do governo.

The subject matter included philosophy,

Os assuntos incluíam filosofia,

farming,

agricultura e até táticas militares.

and even military tactics.

Standardized tests continued to be used around the world for the next two millennia,

Os testes padronizados continuaram a ser usados em todo o mundo

pelos dois milênios seguintes,

and today, they're used for everything

e hoje eles são usados para tudo,

from evaluating stair climbs for firefighters in France

desde avaliar bombeiros subindo escadas, na França,

to language examinations for diplomats in Canada

a exames de língua para diplomatas, no Canadá,

até os alunos nas escolas.

to students in schools.

Some standardized tests measure scores

Alguns exames padronizados medem a pontuação

apenas em relação aos resultados obtidos por outros examinados.

only in relation to the results of other test takers.

Others measure performances on how well test takers meet predetermined criteria.

Outros medem a performance dos examinados em relação a critérios pré-determinados.

So the stair climb for the firefighter

Assim, a subida de escada para o bombeiro

could be measured by comparing the time of the climb

poderia ser medida comparando o tempo de subida

to that of all other firefighters.

de todos os bombeiros.

This might be expressed in what many call a bell curve.

Isso poderia ser expresso na chamada curva de sino.

Or it could be evaluated with reference to set criteria,

Ou poderia ser avaliado em relação a critérios definidos,

such as carrying a certain amount of weight a certain distance

como carregar uma certa quantidade de peso por certa distância,

up a certain number of stairs.

subindo um certo número de degraus.

Similarly, the diplomat might be measured against other test-taking diplomats,

Similarmente, o diplomata pode ser avaliado

em comparação a outros diplomatas examinados,

or against a set of fixed criteria,

ou em relação a uma série de critérios definidos,

which demonstrate different levels of language proficiency.

que demonstram diferentes níveis de proficiência linguística.

Todos estes resultados podem ser expressos usando o que chamamos de percentil.

And all of these results can be expressed using something called a percentile.

If a diplomat is in the 70th percentile, 70% of test takers scored below her.

Se uma diplomata está no 70º percentil,

70% dos examinados obtiveram pontuação menor que a dela.

If she scored in the 30th percentile, 70% of test takers scored above her.

Se sua pontuação está no 30º percentil, 70% dos examinados pontuaram acima dela.

Although standardized tests are sometimes controversial,

Embora exames padronizados sejam, às vezes, controversos,

they're simply a tool.

eles são simplesmente uma ferramenta.

As a thought experiment, think of a standardized test as a ruler.

Como um experimento mental,

pense em um exame padronizado como uma régua.

A ruler's usefulness depends on two things.

A utilidade de uma régua depende de duas coisas.

First, the job we ask it to do.

Primeiro, a tarefa que queremos que ela faça.

Our ruler can't measure the temperature outside

Nossa régua não pode medir a temperatura externa

or how loud someone is singing.

ou o quão alto alguém está cantando.

Second, the ruler's usefulness depends on its design.

Segundo, a utilidade da régua depende do seu desenho.

Say you need to measure the circumference of an orange.

Suponha que precise medir a circunferência de uma laranja.

Nossa régua mede comprimento, o que é a quantidade correta,

Our ruler measures length, which is the right quantity,

but it hasn't been designed with the flexibility required for the task at hand.

mas ela não foi projetada

com a flexibilidade necessária para essa tarefa.

So, if standardized tests are given the wrong job,

Assim, se aplicamos os exames padronizados à tarefa errada

or aren't designed properly,

ou se não são projetados corretamente,

they may end up measuring the wrong things.

eles podem acabar medindo as coisas erradas.

In the case of schools,

No caso das escolas,

students with test anxiety may have trouble performing their best

os alunos com ansiedade de prova podem ter dificuldade para fazer o seu melhor

on a standardized test,

em um exame padronizado,

not because they don't know the answers,

não porque não sabem as respostas,

mas porque ficam muito nervosos para compartilhar o que aprenderam.

but because they're feeling too nervous to share what they've learned.

Students with reading challenges

Alunos com dificuldade de leitura

may struggle with the wording of a math problem,

podem sofrer com o texto de um problema matemático.

Assim, o resultado do exame pode refletir

so their test results may better reflect their literacy

rather than numeracy skills.

mais seu grau de alfabetização do que suas habilidades matemáticas.

And students who were confused by examples

E alunos que se confundem com exemplos

on tests that contain unfamiliar cultural references

em exames que contêm referências culturais não familiares

may do poorly,

podem ir mal,

telling us more about the test taker's cultural familiarity

mostrando mais sobre a familiaridade cultural dos examinados

than their academic learning.

do que sobre seu aprendizado acadêmico.

In these cases, the tests may need to be designed differently.

Nesses casos, os exames podem precisar ser projetados de forma diferente.

Standardized tests can also have a hard time

Exames padronizados também podem ter dificuldade

measuring abstract characteristics or skills,

para medir características abstratas ou habilidades,

such as creativity, critical thinking, and collaboration.

como criatividade, pensamento crítico e colaboração.

If we design a test poorly,

Se projetamos mal um exame,

or ask it to do the wrong job,

ou se pedimos para fazer a tarefa errada,

or a job it's not very good at,

ou uma tarefa que não é a sua especialidade,

the results may not be reliable or valid.

os resultados podem não ser confiáveis ou válidos.

Reliability and validity are two critical ideas

Confiabilidade e validade são dois conceitos essenciais

for understanding standardized tests.

para entender os exames padronizados.

To understand the difference between them,

Para entender a diferença entre eles,

we can use the metaphor of two broken thermometers.

podemos usar a metáfora de dois termômetros quebrados.

An unreliable thermometer

Um termômetro não confiável

gives you a different reading each time you take your temperature,

apresenta um número diferente cada vez que medimos a temperatura,

and the reliable but invalid thermometer is consistently ten degrees too hot.

e o termômetro confiável, mas inválido, é consistentemente dez graus mais quente.

Validade também depende da interpretação acurada dos resultados.

Validity also depends on accurate interpretations of results.

If people say results of a test mean something they don't,

Se alguém disser que o resultado de um exame é o que ele não é

that test may have a validity problem.

aquele exame pode ter um problema de validade.

Just as we wouldn't expect a ruler to tell us how much an elephant weighs,

Assim como não podemos esperar que uma régua mostre quanto pesa um elefante,

or what it had for breakfast,

ou o que ele comeu no café da manhã,

we can't expect standardized tests alone to reliably tell us how smart someone is,

não podemos esperar que apenas exames padronizados

nos digam de forma confiável o quão inteligente uma pessoa é,

como diplomatas vão lidar com uma situação difícil,

how diplomats will handle a tough situation,

or how brave a firefighter might turn out to be.

ou quão corajoso um bombeiro pode vir a ser.

So standardized tests may help us learn a little about a lot of people

Assim, exames padronizados

podem nos ajudar a entender um pouco sobre muitas pessoas em um curto tempo,

in a short time,

but they usually can't tell us a lot about a single person.

mas, em geral, eles não podem nos dizer muito sobre uma única pessoa.

Muitos cientistas sociais se preocupam

Many social scientists worry about test scores resulting in sweeping

com o fato de as notas obtidas causarem mudanças radicais

and often negative changes for test takers,

e até mesmo negativas para os examinados,

sometimes with long-term life consequences.

podendo causar consequências para o resto da vida.

We can't blame the tests, though.

Contudo, não podemos culpar os exames.

It's up to us to use the right tests for the right jobs,

É nosso dever usar os exames certos para as tarefas certas,

and to interpret results appropriately.

e interpretar os resultados adequadamente.