Kenneth Cukier: Big data is better data

ケネス・ツーケル: ビックデータはより良いデータ

翻訳: Masako Kigami 校正: Miki H

America's favorite pie is?

アメリカで人気のパイと言えば？

Audience: Apple. Kenneth Cukier: Apple. Of course it is.

聴衆：「アップルパイ」 もちろん アップルパイですよね

How do we know it?

どうして分かるのでしょうか？

Because of data.

データがあるからです

You look at supermarket sales.

スーパーの売上げを考えてみましょう

You look at supermarket sales of 30-centimeter pies

30cmの冷凍パイの売上げについてです

that are frozen, and apple wins, no contest.

アップルパイが断トツ１位です

The majority of the sales are apple.

売上げの大部分がアップルパイです

But then supermarkets started selling

ところが スーパーが小さな

smaller, 11-centimeter pies,

11ｃｍセンチのパイを売り始めると

and suddenly, apple fell to fourth or fifth place.

突然 アップルパイは ４､５番目に転落しまいました

Why? What happened?

なぜでしょうか？ 何が起こったのでしょうか？

Okay, think about it.

考えてみてください

When you buy a 30-centimeter pie,

30cmのパイを買う時は

the whole family has to agree,

家族全員の希望に沿うパイを選びます

and apple is everyone's second favorite.

アップルパイは家族の第二希望なのです

(Laughter)

（笑）

But when you buy an individual 11-centimeter pie,

でも 個人用の11cmのパイを買う時は

you can buy the one that you want.

自分が欲しいパイを買います

You can get your first choice.

自分の第一希望を買えるのです

You have more data.

データがたくさんあると

You can see something

データが少ない時には

that you couldn't see

分からなかったことが

when you only had smaller amounts of it.

分かってくるのです

Now, the point here is that more data

つまり より多くのデータがあると

doesn't just let us see more,

多くが見えるだけでなく

more of the same thing we were looking at.

見ていたことからも多くが分かるのです

More data allows us to see new.

データが多いほど 新しいことが分かってきます

It allows us to see better.

より良い見方や

It allows us to see different.

違う見方ができるようになります

In this case, it allows us to see

この例で　分かることは

what America's favorite pie is:

「アメリカで人気のパイは

not apple.

アップルパイではない」ということです

Now, you probably all have heard the term big data.

皆さんは「ビッグデータ」という言葉を お聞きになられたことがあるでしょう

In fact, you're probably sick of hearing the term

もしかしたら 耳にタコがでくるくらい

big data.

お聞きになっているかもしれません

It is true that there is a lot of hype around the term,

ビッグデータは 誇大宣伝されている部分もあり

and that is very unfortunate,

非常に残念なことです

because big data is an extremely important tool

なぜなら ビッグデータは 社会の進歩に欠かせない

by which society is going to advance.

非常に重要なツールだからです

In the past, we used to look at small data

昔は 少ないデータから

and think about what it would mean

世界を理解しようと

to try to understand the world,

考えてきました

and now we have a lot more of it,

現在は 以前では考えられなかった程の

more than we ever could before.

大量のデータがあるのです

What we find is that when we have

大量のデータがあると

a large body of data, we can fundamentally do things

データ量が少なかった時に 不可能だったことが

that we couldn't do when we only had smaller amounts.

根本的に可能になる ということが分かってきました

Big data is important, and big data is new,

ビッグデータは重要で 新しいものです

and when you think about it,

ビックデータについて考えてみると

the only way this planet is going to deal

地球規模の課題について－

with its global challenges —

食糧問題や医療の供給

to feed people, supply them with medical care,

エネルギーや電力の供給などに

supply them with energy, electricity,

対処する唯一の方法であり

and to make sure they're not burnt to a crisp

地球温暖化の影響で

because of global warming —

カリカリに焼けることがないように

is because of the effective use of data.

データを効率的に使うことが必要なのです

So what is new about big data? What is the big deal?

ビッグデータの新しいモノとは何で 重大事とは何でしょうか？

Well, to answer that question, let's think about

その問いに答えるために

what information looked like,

情報がどのようなもので

physically looked like in the past.

過去には 物理的にどう映っていたのかを 考えてみましょう

In 1908, on the island of Crete,

1908年 クレタ島で

archaeologists discovered a clay disc.

考古学者が粘土の円盤を発見しました

They dated it from 2000 B.C., so it's 4,000 years old.

4.000年前の紀元前2,000年のものです

Now, there's inscriptions on this disc,

この円盤には文字が書かれていますが

but we actually don't know what it means.

実質的には 解読できません

It's a complete mystery, but the point is that

完全に謎なのですが

this is what information used to look like

4,000年前の情報がどんなもの

4,000 years ago.

だったのかを言いたいのです

This is how society stored

これが 社会が情報を保管して

and transmitted information.

伝えたやり方です

Now, society hasn't advanced all that much.

さて 社会はそれほど進歩しませんでした

We still store information on discs,

今でもディスクに情報を保管しています

but now we can store a lot more information,

でも 以前よりもずっと大量の情報を

more than ever before.

保管できるのです

Searching it is easier. Copying it easier.

検索やコピーも より簡単です

Sharing it is easier. Processing it is easier.

共有や処理も より簡単です

And what we can do is we can reuse this information

情報を収集する時

for uses that we never even imagined

かつては想像だにしなかった

when we first collected the data.

情報の再利用もできるのです

In this respect, the data has gone

この点において データは

from a stock to a flow,

固定的なモノから流動的なモノへ

from something that is stationary and static

変化のない静的なモノから

to something that is fluid and dynamic.

変わりやすくダイナミックスなモノへと 変化しているのです

There is, if you will, a liquidity to information.

いうなれば 情報には流動性があります

The disc that was discovered off of Crete

クレタ島で発見された

that's 4,000 years old, is heavy,

4,000年前の円盤は重く

it doesn't store a lot of information,

情報はたくさん書かれていませんし

and that information is unchangeable.

書き変えることはできないのです

By contrast, all of the files

対照的に エドワード・スノーデンが

that Edward Snowden took

アメリカの国家安全保障局から

from the National Security Agency in the United States

持ち出したファイルはすべて

fits on a memory stick

指の爪サイズの

the size of a fingernail,

USBに保存でき

and it can be shared at the speed of light.

光速で共有できるのです

More data. More.

データは膨れ上がっています

Now, one reason why we have so much data in the world today

さて 今日の世界に大量のデータがあるのは

is we are collecting things

常時 情報を集めているモノを

that we've always collected information on,

収集しているからです

but another reason why is we're taking things

別の理由は 常に情報を含みつつも

that have always been informational

データ形式にレンダレングされていない

but have never been rendered into a data format

ものを集めているからです

and we are putting it into data.

そしてデータに置き換えます

Think, for example, the question of location.

例として 場所について考えてみましょう

Take, for example, Martin Luther.

マーティン・ルターを例に挙げます

If we wanted to know in the 1500s

1,500年代に

where Martin Luther was,

マーティン・ルターの居場所を知りたいのなら

we would have to follow him at all times,

常に彼の後をついて行き

maybe with a feathery quill and an inkwell,

羽ペンとインク入れを持ち運び

and record it,

居場所を記録しなければなりません

but now think about what it looks like today.

でも 今日ではどうでしょうか

You know that somewhere,

電気通信業者のデータペースにより

probably in a telecommunications carrier's database,

居場所が分かります

there is a spreadsheet or at least a database entry

常に あなたの居場所に関する情報を

that records your information

記録するスプレッドシートや

of where you've been at all times.

データベースへの登録などがあります

If you have a cell phone,

携帯電話を持っているなら

and that cell phone has GPS, but even if it doesn't have GPS,

GPS機能があります GPS機能のない機種でも

it can record your information.

あなたの情報を記録できるのです

In this respect, location has been datafied.

つまり 場所はデータ化されるのです

Now think, for example, of the issue of posture,

別の例として 姿勢について考えてみましょう

the way that you are all sitting right now,

今皆さん全員座っておられますが

the way that you sit,

あなたの座り方

the way that you sit, the way that you sit.

あなたの座り方 あなたの座り方

It's all different, and it's a function of your leg length

全て異なります 足の長さや

and your back and the contours of your back,

背中や背中の曲線などが違います

and if I were to put sensors, maybe 100 sensors

今皆さんが座られている椅子に

into all of your chairs right now,

100個のセンサーを付けるなら

I could create an index that's fairly unique to you,

あなた独自の座り方の特徴を

sort of like a fingerprint, but it's not your finger.

指ではないですが 指紋のように 分類できるのです

So what could we do with this?

これで何ができるのでしょうか？

Researchers in Tokyo are using it

東京の研究者は

as a potential anti-theft device in cars.

これを車の盗難防止装置 として使えると考えています

The idea is that the carjacker sits behind the wheel,

運転席に車泥棒が座るという発想により

tries to stream off, but the car recognizes

防犯につなげようとしています

that a non-approved driver is behind the wheel,

認証されていないドライバーが 運転席に座ると

and maybe the engine just stops, unless you

「自分は認証されたドライバーである」

type in a password into the dashboard

と伝えるために ダッシュボードにパスワードを入力しないと

to say, "Hey, I have authorization to drive." Great.

エンジンが始動しないかもしれません 素晴らしいですね

What if every single car in Europe

ヨーロッパで全ての車が この技術を搭載すると

had this technology in it?

どうなるのでしょうか？

What could we do then?

その時 何ができるのでしょうか？

Maybe, if we aggregated the data,

おそらく データを収集すると

maybe we could identify telltale signs

車の事故が 次の５秒で起こることを

that best predict that a car accident

ピタリと言い当てることが

is going to take place in the next five seconds.

できるかもしれません

And then what we will have datafied

そして ドライバーの疲労を

is driver fatigue,

データ化し

and the service would be when the car senses

車がドライバーの姿勢が悪くなってきたと

that the person slumps into that position,

感じたら 自動的に 内部アラームを設定します

automatically knows, hey, set an internal alarm

ハンドルを振動させたり

that would vibrate the steering wheel, honk inside

「起きてください

to say, "Hey, wake up,

道路にもっと注意を向けましょう」と

pay more attention to the road."

言葉で教えてくれます

These are the sorts of things we can do

暮らしの様々な側面をデータ化すると

when we datafy more aspects of our lives.

私たちのできることを分類できます

So what is the value of big data?

つまり ビックデータの価値とは 何でしょうか？

Well, think about it.

考えてみてください

You have more information.

あなたは より多くの情報を持っており

You can do things that you couldn't do before.

以前にはできなかったことが できるのです

One of the most impressive areas

このコンセプトが生じる

where this concept is taking place

最も印象的な領域の１つが

is in the area of machine learning.

機械学習の領域です

Machine learning is a branch of artificial intelligence,

機械学習とは 人口知能に含まれ

which itself is a branch of computer science.

コンピュータ・サイエンスの１つです

The general idea is that instead of

その概念は コンピュータに

instructing a computer what do do,

何をするかを教える代わりに

we are going to simply throw data at the problem

単純に問題となるデータを投げると

and tell the computer to figure it out for itself.

コンピュータが独自に解明してくれるのです

And it will help you understand it

その起源を辿ると

by seeing its origins.

分かりやすいでしょう

In the 1950s, a computer scientist

1950年代 アーサー・サミュエルという

at IBM named Arthur Samuel liked to play checkers,

IBMのコンピュータ科学者は チェッカーが好きでした

so he wrote a computer program

コンピュータ・プログラムを書き

so he could play against the computer.

彼はコンピュータと対戦しました

He played. He won.

彼は対戦して 勝ちました

He played. He won.

彼は対戦して 勝ちました

He played. He won,

彼は対戦して 勝ちました

because the computer only knew

コンピュータが正式なルールしか

what a legal move was.

知らなかったからです

Arthur Samuel knew something else.

アーサー・サミュエルは すごいことを知っていました

Arthur Samuel knew strategy.

彼は 戦略を知っていました

So he wrote a small sub-program alongside it

彼はサブプログラムを作成して

operating in the background, and all it did

バックグラウンドで走らせました

was score the probability

サブプログラムは 一手ごとに

that a given board configuration would likely lead

その盤面の配置から

to a winning board versus a losing board

勝つ確率と負ける確率を

after every move.

記録したのです

He plays the computer. He wins.

彼はコンピュータと対戦して 勝ちました

He plays the computer. He wins.

彼はコンピュータと対戦して 勝ちました

He plays the computer. He wins.

彼はコンピュータと対戦して 勝ちました

And then Arthur Samuel leaves the computer

そして アーサー・サミュエルは

to play itself.

コンピュータ自体が ゲームをするようにしました

It plays itself. It collects more data.

コンピュータは独自にゲームをし より多くのデータを集めました

It collects more data. It increases the accuracy of its prediction.

より多くのデータを集めると 予測の精度も上がります

And then Arthur Samuel goes back to the computer

そしてアーサー・サミュエルは

and he plays it, and he loses,

コンピュータの所へ戻り 対戦して 負けました

and he plays it, and he loses,

彼は対戦して 負けました

and he plays it, and he loses,

彼は対戦して 負けました

and Arthur Samuel has created a machine

アーサー・サミュエルは 教えたタスクで

that surpasses his ability in a task that he taught it.

彼の能力を凌ぐ コンピュータを作りあげました

And this idea of machine learning

機械学習という発想は

is going everywhere.

どこにでもあります

How do you think we have self-driving cars?

自動運転車はどのように 作られたと思いますか？

Are we any better off as a society

ソフトウェアに 全道路法規を記入すると

enshrining all the rules of the road into software?

より豊かな社会なのでしょうか？

No. Memory is cheaper. No.

いいえ 　記憶装置は安価？ いいえ

Algorithms are faster. No. Processors are better. No.

アルゴリズムがより速い？　いいえ プロセッサがより良い？　いいえ

All of those things matter, but that's not why.

それらはすべて重要ですが それが理由ではありません

It's because we changed the nature of the problem.

問題の性質を変えているからです

We changed the nature of the problem from one

私たちの言わんとすることを－

in which we tried to overtly and explicitly

例えば 「自動車の周辺には多くの情報があり

explain to the computer how to drive

皆さんは それを理解しています

to one in which we say,

信号機についても理解しています

"Here's a lot of data around the vehicle.

信号機は赤で青ではないので

You figure it out.

停止する必要があり

You figure it out that that is a traffic light,

前進できません」ということを

that that traffic light is red and not green,

コンピュータに明確に

that that means that you need to stop

説明しようと試みていた

and not go forward."

問題の性質を変えてしまいました

Machine learning is at the basis

機械学習は 私たちが

of many of the things that we do online:

ネット上で行う多くの事の 根底となっています

search engines,

例えば 検索エンジン

Amazon's personalization algorithm,

Amazonのパーソナライズ・アルゴリズム

computer translation,

自動翻訳

voice recognition systems.

音声認識などです

Researchers recently have looked at

最近 研究者は生検や

the question of biopsies,

ガンの生検について

cancerous biopsies,

研究しており

and they've asked the computer to identify

細胞が実際ガンに冒されているか

by looking at the data and survival rates

どうかを調べるために

to determine whether cells are actually

データや生存率を使って

cancerous or not,

コンピュータに 特定させようとしています

and sure enough, when you throw the data at it,

案の定 データを入力すると

through a machine-learning algorithm,

機会学習のアルゴリズム経由で

the machine was able to identify

コンピュータは12個の兆候を

the 12 telltale signs that best predict

特定することで

that this biopsy of the breast cancer cells

乳ガン細胞の生検結果はガンであると

are indeed cancerous.

ビタリと予測します

The problem: The medical literature

問題は 医学文献が

only knew nine of them.

９個しか兆候を知らなかったことです

Three of the traits were ones

特性のうち ３個は

that people didn't need to look for,

探す必要がないものでしたが

but that the machine spotted.

コンピュータは見つけました

Now, there are dark sides to big data as well.

さて　ビックデータにも負の側面があります

It will improve our lives, but there are problems

私たちの暮らしを向上させますが

that we need to be conscious of,

意識しなければならない 問題もあります

and the first one is the idea

最初の問題は

that we may be punished for predictions,

『マイノリティ・リポート』のように

that the police may use big data for their purposes,

警察が目的のためにビックデータを使って

a little bit like "Minority Report."

予測に基づいて 罰するかもしれないということです

Now, it's a term called predictive policing,

さて 予測警備とか

or algorithmic criminology,

アルゴリズム的犯罪学 という用語です

and the idea is that if we take a lot of data,

例えば 過去の犯罪がどこで起こったか

for example where past crimes have been,

というデータがたくさんあると

we know where to send the patrols.

パトロールすべき所が分かる という考え方です

That makes sense, but the problem, of course,

その通りですが もちろん問題もあります

is that it's not simply going to stop on location data,

場所のデータだけで止まらず

it's going to go down to the level of the individual.

個人レベルにまで下りていってしまうことです

Why don't we use data about the person's

個人の高校の成績証明書のデータを

high school transcript?

使うのはどうでしょうか？

Maybe we should use the fact that

失業しているのかどうか

they're unemployed or not, their credit score,

信用情報 ネットサーフィンの行動パターン

their web-surfing behavior,

夜更かしするのかどうか などを

whether they're up late at night.

使うかもしれません

Their Fitbit, when it's able to identify biochemistries,

Fitbit による生化学情報を得れば

will show that they have aggressive thoughts.

使用者が積極的な考え方をしていることさえ分かります

We may have algorithms that are likely to predict

私たちの行動を予測し得る

what we are about to do,

アルゴリズムがあり

and we may be held accountable

実際に私たちが行動する前に

before we've actually acted.

責任を負うことになるかもしれません

Privacy was the central challenge

スモールデータの時代では

in a small data era.

プライバシーが中心的な課題でしたが

In the big data age,

ビックデータの時代では

the challenge will be safeguarding free will,

課題は 自由意思や道徳基準の選択

moral choice, human volition,

人間の決断力や行為主体性などを

human agency.

保護することです

There is another problem:

ビックデータに職を奪われるという

Big data is going to steal our jobs.

別の問題もあります

Big data and algorithms are going to challenge

ビックデータやアルゴリズムは

white collar, professional knowledge work

20世紀に 工場の自動化や

in the 21st century

組立ラインが

in the same way that factory automation

ブルーカラーに対抗したように

and the assembly line

21世紀には ホワイトカラーや専門職に

challenged blue collar labor in the 20th century.

対抗することになるでしょう

Think about a lab technician

顕微鏡を使って

who is looking through a microscope

ガン生検を調べて

at a cancer biopsy

ガンであるかどうかを決める

and determining whether it's cancerous or not.

検査技師について考えてみましょう

The person went to university.

その検査技師は大学教育を受けました

The person buys property.

不動産物件を買ったり

He or she votes.

投票したり

He or she is a stakeholder in society.

社会への出資者でもあります

And that person's job,

そして 検査技師の仕事とは

as well as an entire fleet

同じような専門職の一群と同様に

of professionals like that person,

同じような専門職の一群と同様に

is going to find that their jobs are radically changed

仕事内容が根本的に変わったり

or actually completely eliminated.

完全に無くなったりします

Now, we like to think

短い一時的な混乱の後

that technology creates jobs over a period of time

長年に渡って テクノロジーが仕事を作ってきた

after a short, temporary period of dislocation,

ことについて考えてください

and that is true for the frame of reference

私たちが暮らす枠組み

with which we all live, the Industrial Revolution,

産業革命－は真実で

because that's precisely what happened.

まさに起こったことです

But we forget something in that analysis:

しかし その分析で 忘れていることがあります

There are some categories of jobs

それはなくなり　　 二度と戻ってこなかった

that simply get eliminated and never come back.

職種があるということです

The Industrial Revolution wasn't very good

産業革命は あまり有難くないものでした

if you were a horse.

あなたが馬であれば

So we're going to need to be careful

ですから　注意深く ビックデータを取扱い

and take big data and adjust it for our needs,

私たちのニーズ 非常に人間的なニーズのために

our very human needs.

調整していく必要があります

We have to be the master of this technology,

私たちは　この技術の召使ではなく

not its servant.

所有者にならなければなりません

We are just at the outset of the big data era,

ビックデータの時代は 始まったばかりなので

and honestly, we are not very good

正直言って 今集められた全データに

at handling all the data that we can now collect.

私たちは　あまりうまく対処できていません

It's not just a problem for the National Security Agency.

国家安全保障局だけの 問題ではありません

Businesses collect lots of data, and they misuse it too,

企業も多くのデータを集め 乱用しています

and we need to get better at this, and this will take time.

うまく使えるようになるには　時間がかかります

It's a little bit like the challenge that was faced

原始人と火が直面していた課題に

by primitive man and fire.

ちょっと似ています

This is a tool, but this is a tool that,

これはツールですが

unless we're careful, will burn us.

注意しないと 私たちを焼いてしまうツールなのです

Big data is going to transform how we live,

ビックデータは 生き方や働き方や考え方を

how we work and how we think.

変えていくことでしょう

It is going to help us manage our careers

私たちのキャリアを管理して

and lead lives of satisfaction and hope

満足して希望が持て 幸福で健康な暮らしに

and happiness and health,

導くことでしょう

but in the past, we've often looked at information technology

しかし 過去に 情報技術でよくあったように

and our eyes have only seen the T,

物理的なものであるＴ－

the technology, the hardware,

技術やハードウェアに

because that's what was physical.

目が行きがちになります

We now need to recast our gaze at the I,

明確でない部分があるものの

the information,

いくつかの点において

which is less apparent,

かなり重要である Ｉ－

but in some ways a lot more important.

情報に再び着目する必要があります

Humanity can finally learn from the information

世界や私たちの居場所を理解するために

that it can collect,

時代を超えた冒険の一端として

as part of our timeless quest

集めた情報から

to understand the world and our place in it,

人間性がついに学べるのです

and that's why big data is a big deal.

そのことがビックデータが 重大事な理由なのです

(Applause)

(拍手)