James Patten: The best computer interface? Maybe ... your hands

最高のコンピュータインタフェースは手かもしれない

翻訳: Yasushi Aoki 校正: Ai Tokimatsu

A computer is an incredibly powerful means

コンピューターは 創造的表現のための

of creative expression,

強力な道具ですが

but for the most part,

その表現の大部分は

that expression is confined to the screens

ノートPCや 携帯電話の画面に

of our laptops and mobile phones.

閉じ込められています

And I'd like to tell you a story about

物の操作や 人とのやりとりができる

bringing this power of the computer

コンピューターの力を

to move things around and interact with us

画面の中から 我々のいる

off of the screen and into the physical world

物質世界に引っ張り出す—

in which we live.

という話をしたいと思います

A few years ago, I got a call from

何年か前に 高級ファッションの

a luxury fashion store called Barneys New York,

バーニーズ・ニューヨーク という店から

and the next thing I knew,

電話をもらって

I was designing storefront kinetic sculptures

店のショーウィンドウで使う 動く彫刻を

for their window displays.

作ることになりました

This one's called "The Chase."

「チェイス」という作品で

There are two pairs of shoes,

男物と女物の

a man's pair and a woman's pair,

２組の靴があり

and they play out this slow, tense chase

それが このゆっくりとして 緊迫感のある

around the window

ドラマを演じます

in which the man scoots up behind the woman

男が女の後を追い

and gets in her personal space,

近づきすぎると

and then she moves away.

彼女はまた距離を置きます

Each of the shoes has magnets in it,

靴には磁石が仕込んであって

and there are magnets underneath the table

テーブルの下の磁石で

that move the shoes around.

靴を動かしています

My friend Andy Cavatorta was building

友人のアンディ・キャバトータが ビョークの

a robotic harp for Bjork's Biophilia tour

「バイオフィリア」ツアーのために ロボット・ハープを作っていたんですが

and I wound up building the electronics

そのハープを動かし 音楽を奏でるための

and motion control software

電子回路と制御ソフトを

to make the harps move and play music.

私が作ることになりました

The harp has four separate pendulums,

このハープには ４つの振り子があり

and each pendulum has 11 strings,

それぞれの振り子に 11の弦があって

so the harp swings on its axis and also rotates

振り子は振れると同時に 回転することで

in order to play different musical notes,

いろいろな音を出します

and the harps are all networked together

それぞれのハープは ネットワークで繋がり

so that they can play the right notes

正しい音と 正しいタイミングで

at the right time in the music.

曲を弾けるようになっています

I built an interactive chemistry exhibit

シカゴ科学産業博物館のために

at the Museum of Science and Industry in Chicago,

インタラクティブな化学の展示を 作りましたが

and this exhibit lets people use physical objects

それはホッケーパックのような 物を使い

to grab chemical elements off of the periodic table

周期表から元素を取り出して 組み合わせ

and bring them together to cause

化学反応を起こす

chemical reactions to happen.

という趣向のものでした

And the museum noticed that people

博物館は 見学者が多くの時間を

were spending a lot of time with this exhibit,

この展示に費やしている ことに気付き

and a researcher from a science education center

オーストラリアの 科学教育センターから来た研究者が

in Australia decided to study this exhibit

いったいどういうことなのか

and try to figure out what was going on.

調べることになりました

And she found that the physical objects

そして分かったのは

that people were using were helping people

手で動かせる物があることが

understand how to use the exhibit,

どう使うのか 理解するのを助け

and were helping people learn in a social way.

また他の人と一緒に学ぶよう 促すということです

And when you think about it, this makes a lot of sense,

これは理にかなったことです

that using specialized physical objects

それ専用に作られている物の方が

would help people use an interface more easily.

インターフェースとして使いやすいのは 当然でしょう

I mean, our hands and our minds are optimized

私たちの手や頭というのは 触れられる物について

to think about and interact with tangible objects.

考え 扱うことに 最適化されています

Think about which you find easier to use,

本物のキーボードと

a physical keyboard or an onscreen keyboard

スマートフォンの 画面上のキーボードとで

like on a phone?

どちらが使いやすいか 考えてみてください

But the thing that struck me

しかし これらの—

about all of these different projects

プロジェクトを通して 痛感したのは

is that they really had to be built from scratch,

そういう物は 一から作らねばならないことです

down to the level of the electronics

エレクトロニクスのレベルまで 降りていって

and the printed circuit boards and

プリント基板に始まって

all the mechanisms all the way up to the software.

機械仕掛けやソフトウェアまで 作る必要があるのです

I wanted to create something

コンピューター制御下の

where we could move objects under computer control

物を動かすという 概念に基づいて

and create interactions around that idea

さまざまな相互作用を 生み出すような作品を

without having to go through this process

毎回すべて一から作らずに

of building something from scratch

実現できるようにするものを

every single time.

作れないかと思いました

So my first attempt at this

私が最初にした試みは

was at the MIT Media Lab

MITメディアラボで

with Professor Hiroshi Ishii,

石井裕教授の元

and we built this array of

512 個の電磁石を

512 different electromagnets,

碁盤目に並べ

and together they were able to move objects around

その上で物を 動かせるようにする

on top of their surface.

というものでした

But the problem with this

問題は

was that these magnets

これらの磁石が

cost over 10,000 dollars.

１万ドル以上もすることです

Although each one was pretty small,

個々の磁石は 小さなものですが

altogether they weighed so much

合わせると すごく重くなって

that the table that they were on

机がたわんでしまう

started to sag.

という問題もありました

So I wanted to build something

このような操作を

where you could have this kind of interaction

どんな机の上でも

on any tabletop surface.

できるようにするものを 作りたいと思いました

So to explore this idea,

このアイデアの 可能性を探るため

I built an army of small robots,

小さなロボットを たくさん作りました

and each of these robots has what are called omni wheels.

それぞれのロボットには オムニホイールという

They're these special wheels

特別な車輪がついていて

that can move equally easily in all directions,

どの方向にも自由に 動けるようになっています

and when you couple these robots

このロボットを プロジェクターと

with a video projector,

組み合わせることで

you have these physical tools

デジタル情報を操作する

for interacting with digital information.

形のある物としてのツールを 作ることができます

So here's an example of what I mean.

例をご覧に入れましょう

This is a video editing application

これはビデオ編集アプリで

where all of the controls

ビデオの操作はすべて

for manipulating the video are physical.

手触りのある物を 通して行います

So if we want to tweak the color,

色を調整したいと思ったら

we just enter the color mode,

色編集モードに入り

and then we get three different dials

３つのダイアルで

for tweaking the color,

色を調整します

or if we want to adjust the audio,

音を調整する時も

then we get two different dials for that, these physical objects.

手で操作する ダイアル２つで行います

So here the left and right channel stay in sync,

左右のチャネルは 同期していますが

but if we want to, we can override that

別々の設定にしたければ

by grabbing both of them at the same time.

両方のダイアルを同時に動かすことで 指定できます

So the idea is that we get the speed

これらのダイアルを

and efficiency benefits of using these physical dials

使うことによる スピードや効率と

together with the flexibility and versatility

ソフトウェアで作るシステムの 柔軟性と汎用性を

of a system that's designed in software.

併せ持ったものを作ろうというのが ここでのアイデアです

And this is a mapping application

これは災害対応のための

for disaster response.

マッピングアプリです

So you have these physical objects

警官や消防車や 救助隊を表す

that represent police, fire and rescue,

駒として このロボットを使い

and a dispatcher can grab them

通信指令室で それを—

and place them on the map

マップの上で動かすことで

to tell those units where to go,

部隊に行き先の指示を出し

and then the position of the units on the map

マップ上の駒の位置は

gets synced up with the position

対応する部隊の 実際の位置と同期します

of those units in the real world.

対応する部隊の 実際の位置と同期します

This is a video chat application.

これはビデオチャットアプリですが

It's amazing how much emotion you can convey

物にちょっとした 動きを付けることで

with just a few simple movements

どれほど感情表現ができるかは 驚くほどです

of a physical object.

どれほど感情表現ができるかは 驚くほどです

With this interface, we open up a huge array of possibilities

このインターフェースによって

in between traditional board games

従来のボードゲームと アーケードゲームの間の

and arcade games,

様々な可能性が開けます

where the physical possibilities of interaction

物を使った対話が 非常に異なるスタイルの

make so many different styles of play possible.

遊び方を 可能にするからです

But one of the areas that I'm most excited

私がこの応用として 特に面白いと思うのは

about using this platform for

コンピューターだけ あるいは

is applying it to problems that are difficult

人間だけでは 解くのが難しい問題に

for computers or people to solve alone.

適用した場合です

One example of those is protein folding.

１つの例は タンパク質の折り畳み問題です

So here we have an interface

このインターフェースでは

where we have physical handles onto a protein,

画面の中のタンパク質に 手でつかめるハンドルを付け

and we can grab those handles

それを使って タンパク質を動かすことで

and try to move the protein and try to fold it in different ways.

様々な畳み方を 試すことができます

And if we move it in a way that doesn't really make sense

分子シミュレーション上

with the underlying molecular simulation,

無理な動かし方を しようとすると

we get this physical feedback where we can

触覚的なフィードバックがあり

actually feel these physical handles

ハンドルが動きに抵抗するのを

pulling back against us.

実際に感じることができます

So feeling what's going on

分子シミュレーションが

inside a molecular simulation

どうなっているのか 体で感じ取れる点で

is a whole different level of interaction.

全く異なる関わり方が 可能になっています

So we're just beginning to explore

身の回りにある 物の動きを

what's possible when we use software

ソフトウェアで制御したら どんなことが—

to control the movement

可能になるかという探求は

of objects in our environment.

まだ始まったばかりです

Maybe this is the computer of the future.

未来のコンピューターは このようになっているかもしれません

There's no touchscreen.

タッチスクリーンはなく

There's no technology visible at all.

目に見えるハイテクなものは 何もありません

But when we want to have a video chat

しかしビデオチャットや

or play a game

ゲームや 次のプレゼンの—

or lay out the slides to our next TED Talk,

スライド作りをやろう という段になったら

the objects on the table come alive.

テーブルの上の物に 命が吹き込まれるのです

Thank you.

どうもありがとうございました

(Applause)

(拍手)