Big Data - Tim Smith

Exploração no limite da grande quantidade de dados - Tim Smith

Translator: Andrea McDonough Reviewer: Jessica Ruby

Tradutor: Isabel Villan Revisor: Viviane Ferraz Matos

Big data is an elusive concept.

Grande quantidade de informação é um conceito elusivo.

It represents an amount of digital information,

Ele representa uma quantidade de informação digital,

which is uncomfortable to store,

que é difícil de armazenar.

transport,

transportar

or analyze.

ou analisar.

Big data is so voluminous

Grande quantidade de informação é algo tão volumoso

that it overwhelms the technologies of the day

que soterra as tecnologias atuais

and challenges us to create the next generation

e nos desafia a criar a próxima geração

of data storage tools and techniques.

de ferramentas e técnicas para estocagem de dados.

So, big data isn't new.

Bem, grande quantidade de informação não é nada novo.

In fact, physicists at CERN have been rangling

Na verdade, físicos no CERN têm se contorcido

with the challenge of their ever-expanding big data for decades.

com o desafio de sua grande quantidade de dados que sempre se expande por décadas.

Fifty years ago, CERN's data could be stored

Cinquenta anos atrás, os dados do CERN podiam ser armazenados

in a single computer.

em um único computador.

OK, so it wasn't your usual computer,

Ok, não era um computador comum,

this was a mainframe computer

esse era um 'mainframe'

that filled an entire building.

que enchia um edifício inteiro.

To analyze the data,

Para analisar os dados,

physicists from around the world traveled to CERN

físícos de todo o mundo viajavam ao CERN

to connect to the enormous machine.

para conectar-se à enorme máquina.

In the 1970's, our ever-growing big data

Na década de 1970, nossa grande quantidade de dados

was distributed across different sets of computers,

foi distribuída entre diferentes conjuntos de computadores

which mushroomed at CERN.

que cresceram feito cogumelos no CERN.

Each set was joined together

Cada conjunto foi interligado

in dedicated, homegrown networks.

a redes internas exclusivas.

But physicists collaborated without regard

Mas os físicos trabalhavam sem levar em consideração

for the boundaries between sets,

os limites entre os conjuntos,

hence needed to access data on all of these.

por isso precisavam acessar dados em todos eles.

So, we bridged the independent networks together

Portanto, conectamos as redes independentes

in our own CERNET.

em nossa própria CERNET.

In the 1980's, islands of similar networks

Na década de 1980, ilhas de redes similares,

speaking different dialects

falando diferentes dialetos,

sprung up all over Europe and the States,

surgiram por toda a Europa e Estados Unidos,

making remote access possible but torturous.

tornando o acesso remoto possível, mas torturante.

To make it easy for our physicists across the world

Para tornar mais fácil para nossos físicos do mundo todo

to access the ever-expanding big data

acessar o conjunto de dados que sempre se expande,

stored at CERN without traveling,

armazenado no CERN sem viajar,

the networks needed to be talking

as redes precisavam falar

with the same language.

a mesma língua.

We adopted the fledgling internet working standard from the States,

Adotamos o padrão de trabalho da incipiente internet dos Estados Unidos,

followed by the rest of Europe,

seguida pelo resto da Europa,

and we established the principal link at CERN

e estabelecemos o 'link' principal, no CERN,

between Europe and the States in 1989,

entre Europa e os Estados Unidos em 1989,

and the truly global internet took off!

e surgiu a verdadeira internet global!

Physicists could easily then access

Os físicos podiam acessar facilmente

the terabytes of big data

os terabytes do conjunto de dados

remotely from around the world,

remotamente, pelo mundo todo,

generate results,

gerar resultados

and write papers in their home institutes.

e escrever estudos em suas instituições locais.

Then, they wanted to share their findings

Daí, eles queriam compartilhar suas descobertas

with all their colleagues.

com todos seus colegas.

To make this information sharing easy,

Para tornar fácil o compartilhamento dessa informação,

we created the web in the early 1990's.

criamos a 'web' no início da década de 1990.

Physicists no longer needed to know

Os físicos não precisavam mais saber

where the information was stored

onde a informação estava armazenada

in order to find it and access it on the web,

para encontrá-la e acessá-la na web,

an idea which caught on across the world

uma ideia que pegou no mundo todo

and has transformed the way we communicate

e transformou a forma como nos comunicamos

in our daily lives.

no cotidiano.

During the early 2000's,

No início da década de 2000,

the continued growth of our big data

o contínuo crescimento de nosso conjunto de dados

outstripped our capability to analyze it at CERN,

ultrapassou nossa capacidade de analisá-los no CERN,

despite having buildings full of computers.

apesar de termos edifícios cheios de computadores.

We had to start distributing the petabytes of data

Tivemos que começar a distribuir os petabytes de dados

to our collaborating partners

a nossos colaboradores associados,

in order to employ local computing and storage

para que utilizassem computadores e armazenamento locais

at hundreds of different institutes.

em centenas de instituições diferentes.

In order to orchestrate these interconnected resources

Para orquestrar esses recursos interconectados

with their diverse technologies,

com suas diferentes tecnologias,

we developed a computing grid,

desenvolvemos uma rede,

enabling the seamless sharing

que permite o compartilhamento contínuo

of computing resources around the globe.

de recursos computacionais no mundo todo.

This relies on trust relationships and mutual exchange.

Isso se assenta em relações de confiança e troca mútua.

But this grid model could not be transferred

Mas essa rede modelo não pode ser transferida

out of our community so easily,

para fora de nossa comunidade tão facilmente,

where not everyone has resources to share

onde nem todos têm recursos para compartilhar

nor could companies be expected

nem se pode esperar que empresas

to have the same level of trust.

tenham o mesmo nível de confiança.

Instead, an alternative, more business-like approach

De outro lado, uma alternativa, uma abordagem mais empresarial

for accessing on-demand resources

para acessar recursos sob demanda,

has been flourishing recently,

desenvolveu-se recentemente,

called cloud computing,

chamada computação na nuvem,

which other communities are now exploiting

que outras comunidades estão explorando agora

to analyzing their big data.

para analisar sua grande quantidade de informação.

It might seem paradoxical for a place like CERN,

Pode parecer paradoxal para um lugar como o CERN,

a lab focused on the study

um laboratório focado no estudo

of the unimaginably small building blocks of matter,

dos imensamente pequenos blocos construtores da matéria,

to be the source of something as big as big data.

ser a fonte de algo tão grande quanto o imenso conjunto de dados.

But the way we study the fundamental particles,

Mas a forma pela qual estudamos as partículas fundamentais,

as well as the forces by which they interact,

assim como as forças com as quais elas interagem,

involves creating them fleetingly,

envolve criá-las transitoriamente,

colliding protons in our accelerators

colidindo prótons em nossos aceleradores

and capturing a trace of them

e capturando um indício deles

as they zoom off near light speed.

enquanto aceleram até próximo à velocidade da luz.

To see those traces,

Para ver esses indícios,

our detector, with 150 million sensors,

nosso detector, com 150 milhões de sensores,

acts like a really massive 3-D camera,

atua como uma verdadeira câmera 3-D,

taking a picture of each collision event -

fotografando cada colisão.

that's up to 14 millions times per second.

Isso é mais que 14 milhões de vezes por segundo.

That makes a lot of data.

Isso produz muita informação.

But if big data has been around for so long,

Mas, se há tanto tempo essa grande quantidade de dados está por aí,

why do we suddenly keep hearing about it now?

por que de repente estamos ouvindo sobre isso agora?

Well, as the old metaphor explains,

Bem, como explica a velha metáfora,

the whole is greater than the sum of its parts,

o todo é maior que a soma de suas partes,

and this is no longer just science that is exploiting this.

e não é mais apenas a ciência que está explorando isso.

The fact that we can derive more knowledge

O fato de que podemos obter mais conhecimento

by joining related information together

reunindo informações relacionadas

and spotting correlations

e observando correlações

can inform and enrich numerous aspects of everyday life,

pode informar e enriquecer numerosos aspectos da vida cotidiana,

either in real time,

seja em tempo real,

such as traffic or financial conditions,

como tráfego ou condições financeiras,

in short-term evolutions,

seja em evoluções de curto prazo,

such as medical or meteorological,

como diagnósticos médicos e previsões meteorológicas,

or in predictive situations,

seja em situações previsíveis,

such as business, crime, or disease trends.

como negócios, crime ou propensão a doenças.

Virtually every field is turning to gathering big data,

Virtualmente, cada campo está se voltando para o agrupamento de grande quantidade de informação,

with mobile sensor networks spanning the globe,

com redes de sensores móveis abrangendo o globo,

cameras on the ground and in the air,

câmeras na terra e no ar,

archives storing information published on the web,

arquivos armazenando informações publicadas na web,

and loggers capturing the activities

e registradores capturando as atividades

of Internet citizens the world over.

de cidadãos da Internet no mundo todo.

The challenge is on to invent new tools and techniques

O desafio é inventar novas ferramentas e técnicas

to mine these vast stores,

que garimpem esses vastos armazéns,

to inform decision making,

para embasar a tomada de decisão,

to improve medical diagnosis,

melhorar diagnóstico médico

and otherwise to answer needs and desires

e atender necessidades e desejos

of tomorrow's society in ways that are unimagined today.

da sociedade de amanhã de maneiras que são inimagináveis hoje.