Big Data - Tim Smith

Translator: Andrea McDonough Reviewer: Jessica Ruby

Tradutor: Margarida Ferreira Revisora: Mafalda Ferreira

Big data is an elusive concept.

Os "big data" são um conceito traiçoeiro.

It represents an amount of digital information,

Representam uma quantidade de informações digitais,

which is uncomfortable to store,

muito difíceis de armazenar,

transport,

or analyze.

de transportar ou de analisar.

Big data is so voluminous

Os "big data" são tão volumosos

that it overwhelms the technologies of the day

que sobrecarregam as tecnologias do dia

and challenges us to create the next generation

e desafiam-nos a criar a próxima geração

of data storage tools and techniques.

de ferramentas e técnicas de armazenamento de dados.

So, big data isn't new.

Os "big data" não são uma coisa nova.

In fact, physicists at CERN have been rangling

Com efeito, os físicos no CERN têm vindo a debater-se

with the challenge of their ever-expanding big data for decades.

com o problema do crescimento dos "big data", desde há décadas.

Fifty years ago, CERN's data could be stored

Há 50 anos, os dados do CERN podiam ser guardados

in a single computer.

num único computador.

OK, so it wasn't your usual computer,

Claro, não era um computador vulgar,

this was a mainframe computer

era um computador central

that filled an entire building.

que ocupava um edifício inteiro.

To analyze the data,

Para analisar os dados,

physicists from around the world traveled to CERN

físicos do mundo inteiro deslocavam-se ao CERN

to connect to the enormous machine.

para se ligarem àquela máquina enorme.

In the 1970's, our ever-growing big data

Nos anos 70, os "big data", sempre em crescimento,

was distributed across different sets of computers,

foram distribuídos por diversos grupos de computadores,

which mushroomed at CERN.

que proliferaram no CERN.

Each set was joined together

Cada grupo estava ligado

in dedicated, homegrown networks.

por redes dedicadas, feitas de propósito.

But physicists collaborated without regard

Mas os físicos colaboravam, sem se preocuparem

for the boundaries between sets,

com os limites entre esses grupos.

hence needed to access data on all of these.

e, portanto, precisavam de aceder aos dados de todos eles.

So, we bridged the independent networks together

Por isso, fizemos pontes entre as redes independentes

in our own CERNET.

na nossa CERNET.

In the 1980's, islands of similar networks

Nos anos 80, surgiram ilhas de redes semelhantes,

speaking different dialects

falando diferentes dialetos,

sprung up all over Europe and the States,

por toda a Europa e EUA,

making remote access possible but torturous.

tornando possível o acesso remoto mas tortuoso.

To make it easy for our physicists across the world

Para facilitar a vida aos físicos do mundo inteiro,

to access the ever-expanding big data

quanto ao acesso aos "big data", sempre em crescimento,

stored at CERN without traveling,

guardados no CERN, sem terem de se deslocar,

the networks needed to be talking

era preciso que as redes falassem a mesma linguagem.

with the same language.

We adopted the fledgling internet working standard from the States,

Adotámos a norma de trabalho da nova Internet, nos EUA,

followed by the rest of Europe,

no que fomos seguidos pelo resto da Europa,

and we established the principal link at CERN

e instituímos a principal ligação do CERN,

between Europe and the States in 1989,

entre a Europa e os EUA em 1989,

and the truly global internet took off!

e assim arrancou a Internet realmente global!

Physicists could easily then access

Os físicos passaram a ter um acesso fácil e à distância

the terabytes of big data

ao terabytes dos "big data" do mundo inteiro,

remotely from around the world,

generate results,

a gerar resultados,

and write papers in their home institutes.

e a escrever artigos nos seus institutos locais.

Then, they wanted to share their findings

Depois, quiseram partilhar as suas descobertas

with all their colleagues.

com todos os colegas.

To make this information sharing easy,

Para facilitar esta partilha de informações,

we created the web in the early 1990's.

criámos a "web" no início dos anos 90.

Physicists no longer needed to know

Os físicos já não precisavam de saber

where the information was stored

onde estavam armazenadas as informações

in order to find it and access it on the web,

para as encontrar na "web" e ter-lhes acesso,

an idea which caught on across the world

uma ideia que se espalhou pelo mundo inteiro

and has transformed the way we communicate

e transformou a forma como comunicamos

in our daily lives.

na nossa vida diária.

During the early 2000's,

No início dos anos 2000,

the continued growth of our big data

o contínuo crescimento dos "big data"

outstripped our capability to analyze it at CERN,

ultrapassou a capacidade de os analisarmos no CERN,

despite having buildings full of computers.

apesar de termos edifícios cheios de computadores.

We had to start distributing the petabytes of data

Tivemos que distribuir os petabytes de dados

to our collaborating partners

pelos nossos parceiros colaboradores

in order to employ local computing and storage

a fim de utilizar a informática e a armazenagem locais

at hundreds of different institutes.

em centenas de diversos institutos.

In order to orchestrate these interconnected resources

Para orquestrar estes recursos interligados

with their diverse technologies,

com as suas diversas tecnologias,

we developed a computing grid,

elaborámos uma grelha informática,

enabling the seamless sharing

que permitia a partilha ininterrupta

of computing resources around the globe.

dos recursos informáticos por todo o globo.

This relies on trust relationships and mutual exchange.

Isto assenta em relações de confiança e de troca mutual.

But this grid model could not be transferred

Mas este modelo de grelha não podia ser transferido

out of our community so easily,

para fora da nossa comunidade, facilmente,

where not everyone has resources to share

porque nem toda a gente tem recursos para partilhar

nor could companies be expected

nem podíamos esperar que as empresas

to have the same level of trust.

tivessem o mesmo grau de confiança.

Instead, an alternative, more business-like approach

Em alternativa, tem vindo a florescer recentemente,

for accessing on-demand resources

uma abordagem mais empresarial

has been flourishing recently,

para acesso a recursos, sob pedido.

called cloud computing,

Chama-se "nuvem informática",

which other communities are now exploiting

que outras comunidades estão agora a explorar

to analyzing their big data.

para analisar os seus "big data".

It might seem paradoxical for a place like CERN,

Pode parecer um paradoxo que um local como o CERN,

a lab focused on the study

um laboratório focado no estudo

of the unimaginably small building blocks of matter,

de elementos constitutivos da matéria, incrivelmente pequenos,

to be the source of something as big as big data.

seja a origem duma coisa tão grande como os "big data".

But the way we study the fundamental particles,

Mas a forma como estudamos as partículas fundamentais,

as well as the forces by which they interact,

assim como as forças segundo as quais elas interagem,

involves creating them fleetingly,

consiste em criá-las fugazmente,

colliding protons in our accelerators

fazendo colidir protões nos nossos aceleradores

and capturing a trace of them

e captando o rasto deles

as they zoom off near light speed.

quando eles aceleram à velocidade da luz.

To see those traces,

Para ver esses rastos,

our detector, with 150 million sensors,

o nosso detetor, com 150 milhões de sensores,

acts like a really massive 3-D camera,

atua como uma câmara a 3D muito grande,

taking a picture of each collision event -

que tira uma foto de cada colisão

that's up to 14 millions times per second.

— ou seja 14 milhões de vezes por segundo.

That makes a lot of data.

Isto produz uma grande quantidade de dados.

But if big data has been around for so long,

Mas se os "big data" já existem há tanto tempo

why do we suddenly keep hearing about it now?

porque é que, de repente, ouvimos falar deles agora?

Well, as the old metaphor explains,

Como explica a antiga metáfora,

the whole is greater than the sum of its parts,

o todo é maior do que a soma das partes,

and this is no longer just science that is exploiting this.

e já não é só a ciência que explora isso.

The fact that we can derive more knowledge

O facto de podermos obter mais conhecimentos

by joining related information together

reunindo informações relacionadas,

and spotting correlations

e detetando correlações

can inform and enrich numerous aspects of everyday life,

pode informar e enriquecer inúmeros aspetos da vida diária,

either in real time,

quer em tempo real,

such as traffic or financial conditions,

como o tráfico ou as condições financeiras,

in short-term evolutions,

quer em evoluções a curto prazo,

such as medical or meteorological,

como em situações médicas ou meteorológicas

or in predictive situations,

quer em situações de previsão,

such as business, crime, or disease trends.

como as tendências nos negócios, no crime ou na doença.

Virtually every field is turning to gathering big data,

Praticamente todos os campos estão a virar-se para os "big data",

with mobile sensor networks spanning the globe,

com redes móveis de sensores, espalhadas pelo globo,

cameras on the ground and in the air,

câmaras no solo e no ar,

archives storing information published on the web,

arquivos que guardam informações publicadas na "web",

and loggers capturing the activities

e registadores que captam as atividades

of Internet citizens the world over.

de cidadãos da Internet, por todo o mundo.

The challenge is on to invent new tools and techniques

O problema está na invenção de novas ferramentas e técnicas

to mine these vast stores,

para explorar estes enormes armazéns,

to inform decision making,

para informar a tomada de decisões,

to improve medical diagnosis,

para melhorar os diagnósticos médicos

and otherwise to answer needs and desires

e também para responder a necessidades e desejos

of tomorrow's society in ways that are unimagined today.

da sociedade de amanhã, em formas que hoje são inimagináveis.