David Merrill: Toy tiles that talk to each other

David Merrill demonstriert Siftables, die denkenden Bauklötze

Übersetzung: Christian Mathias Lektorat: Alexander Klar

I want to start out by asking you to think back to when you were a kid,

Ich möchte damit beginnen Sie zu bitten, an die Zeit Ihrer Kindheit zurückzudenken,

playing with blocks.

als Sie mit Bauklötzen spielten.

As you figured out how to reach out and grasp,

Während Sie erkannten, wie man die Hände ausstreckt und zugreift,

pick them up and move them around,

die Klötze aufnimmt und bewegt,

you were actually learning how to think and solve problems

lernten Sie tatsächlich, zu überlegen und Probleme durch

by understanding and manipulating spatial relationships.

das Verstehen und Verändern räumlicher Zusammenhänge zu lösen.

Spatial reasoning is deeply connected

Das räumliche Denken ist eng damit verbunden,

to how we understand a lot of the world around us.

wie wir einen Großteil unserer Umgebung verstehen.

So, as a computer scientist

Als Informatiker

inspired by this utility of our interactions with physical objects --

- inspiriert von der Art unserer Interaktion mit realen Objekten -

along with my adviser Pattie, and my collaborator Jeevan Kalanithi --

zusammen mit meinem Fachberater Patti und meinem Kollegen Jeevan Kalanithi,

I started to wonder -- what if when we used a computer,

begann ich mich zu wundern: Was wäre, wenn wir Computer nutzen würden,

instead of having this one mouse cursor that was a like a digital fingertip

die anstelle eines Maus-Zeigers, der sich wie eine digitale Fingerspitze

moving around a flat desktop,

auf einer flachen Arbeitsfläche bewegt...

what if we could reach in with both hands and grasp information physically,

... Was wäre, wenn wir mit beiden Händen eingreifen könnten und Daten physisch ergreifen

arranging it the way we wanted?

und sie so anordnen könnten, wie wir es wollen?

This question was so compelling that we decided to explore the answer,

Diese Frage war so ergreifend, dass wir uns zur Erforschung der Antwort entschieden und

by building Siftables.

Siftables entwickelten.

In a nutshell, a Siftable is an interactive computer

Kurz gesagt, ein Siftable ist ein interaktiver Computer

the size of a cookie.

in der Größe eines Kekses.

They're able to be moved around by hand,

Sie können mit der Hand bewegt werden,

they can sense each other, they can sense their motion,

sie können sich gegenseitig wahrnehmen, sie können ihre Bewegungen erfassen

and they have a screen and a wireless radio.

und sie haben einen Bildschirm und einen Funkempfänger.

Most importantly, they're physical,

Viel wichtiger: Sind sind körperlich,

so like the blocks, you can move them just by reaching out and grasping.

weshalb man sie wie Bauklötze lediglich durch das Ausstrecken der Hände und Zugreifen bewegen kann.

And Siftables are an example of a new ecosystem

Und die Siftables sind ein Beispiel einer neuen Generation

of tools for manipulating digital information.

von Hilfsmitteln zur Manipulation digitaler Daten.

And as these tools become more physical,

Und wenn diese Hilfsmittel körperlicher werden

more aware of their motion, aware of each other,

und ein Bewusstsein für ihre Bewegungen entwickeln, sich gegenseitig erkennen

and aware of the nuance of how we move them,

und die Feinheiten unseres Umgangs mit ihnen wahrnehmen,

we can start to explore some new and fun interaction styles.

dann können wir mit der Erforschung neuer und unterhaltsamer Interaktionsarten beginnen.

So, I'm going to start with some simple examples.

Ich fange mit einigen einfachen Beispielen an.

This Siftable is configured to show video,

Dieser Siftable ist für die Videowiedergabe konfiguriert

and if I tilt it in one direction, it'll roll the video this way;

und wenn Ich ihn in eine Richtung kippe, wird das Video vorwärts abgespielt;

if I tilt it the other way it rolls it backwards.

wenn ich ihn in die andere Richtung kippe, läuft es rückwärts.

And these interactive portraits are aware of each other.

Und diese interaktiven Portraits nehmen sich gegenseitig wahr.

So if I put them next to each other, they get interested.

Wenn ich sie also nebeneinander lege, weckt das ihr Interesse.

If they get surrounded, they notice that too,

Wenn sie voneinader umgeben sind, bemerken sie das auch

they might get a little flustered.

und können etwas nervös werden.

And they can also sense their motion and tilt.

Und sie fühlen ebenso ihre Bewegungen und Neigung.

One of the interesting implications on interaction, we started to realize,

Eine interessante Folge der Interaktionen, die wir zu erkennen begannen,

was that we could use everyday gestures on data,

war, dass wir alltägliche Gesten auf Daten anwenden könnten,

like pouring a color the way we might pour a liquid.

wie etwa Farben so zu schütten, wie man dies mit Flüssigkeiten tut.

So in this case, we've got three Siftables configured to be paint buckets

In diesem Fall haben wir drei Siftables als Farbtöpfe konfiguriert

and I can use them to pour color into that central one,

und ich kann sie nutzen, um Farbe in den in der Mitte zu gießen,

where they get mixed.

wo sie dann vermischt werden.

If we overshoot, we can pour a little bit back.

Wenn wir es übertreiben, können wir ein wenig zurückschütten.

There are also some neat possibilities for education,

Es gibt außerdem auch einige nette Möglichkeiten in der Bildung

like language, math and logic games

wie Sprachen, Mathematik oder Logikspiele,

where we want to give people the ability to try things quickly,

wo wir den Leuten die Möglichkeit des schnellen Ausprobierens geben

and view the results immediately.

und die Ergebnisse sofort sehen wollen.

So here I'm --

Hier bin ich...

(Applause)

(Applaus)

This is a Fibonacci sequence that I'm making with a simple equation program.

Das ist eine Fibonacci-Folge, die ich mit einem einfachen Gleichungsprogramm erstelle.

Here we have a word game that's kind of like a mash-up between Scrabble and Boggle.

Das ist ein Spiel mit Wörtern, das eine Art Mischung aus Scrabble und Boggle ist.

Basically, in every round

Grundsätzlich bekommt man jede Runde

you get a randomly assigned letter on each Siftable,

auf jeden Siftable zufällig zugewiesene Buchstaben

and as you try to make words it checks against a dictionary.

und während man versucht, Wörter zu bilden, werden diese über ein Wörterbuch geprüft.

Then, after about 30 seconds, it reshuffles,

Dann, nach ungefähr 30 Sekunden, wird wieder gemischt

and you have a new set of letters and new possibilities to try.

und man hat eine neue Buchstabenkombination und neue Möglichkeiten auszuprobieren.

(Applause)

(Applaus)

Thank you.

Vielen Dank.

(Applause)

(Applaus)

So these are some kids that came on a field trip to the Media Lab,

Das sind einige Kinder die auf einem Ausflug zum Media Lab kamen.

and I managed to get them to try it out, and shoot a video.

Ich konnte sie dazu bewegen, es auszuprobieren und habe ein Video davon aufgenommen.

They really loved it.

Sie haben es wirklich geliebt.

And, one of the interesting things about this kind of application

Ein interessanter Umstand bei dieser Art von Anwendungen ist,

is that you don't have to give people many instructions.

dass man den Leuten nicht viele Anweisungen geben muss.

All you have to say is, "Make words,"

Alles was man sagen muss ist "Bildet Wörter"

and they know exactly what to do.

und sie wissen genau, was zu tun ist.

So here's another few people trying it out.

Hier sind noch ein paar Leute, die es testen.

That's our youngest beta tester, down there on the right.

Das ist unser jüngster Beta-Tester dort unten rechts.

Turns out, all he wanted to do was to stack the Siftables up.

Es stellte sich heraus, dass er die Siftables nur stapeln wollte.

So to him, they were just blocks.

Also für ihn waren sie nur Bauklötze.

Now, this is an interactive cartoon application.

Dies ist eine interaktive Trickfilmanwendung.

And we wanted to build a learning tool for language learners.

Wir wollten ein Lernmittel für Sprachlerner entwickeln.

And this is Felix, actually.

Das ist Felix.

And he can bring new characters into the scene,

Er kann neue Charaktere in die Szene bringen,

just by lifting the Siftables off the table that have that character shown on them.

indem er den Siftable vom Tisch aufhebt, der diese Figur zeigt.

Here, he's bringing the sun out.

Hier lässt er die Sonne aufgehen.

Video: The sun is rising.

(Video: Die Sonne geht auf)

David Merrill: Now he's brought a tractor into the scene.

Jetzt holt er einen Traktor in die Szene.

Video: The orange tractor.

(Video: Der orangene Traktor)

Good job! Yeah!

Gute Arbeit! Ja!

DM: So by shaking the Siftables and putting them next to each other

Indem er die Siftables schüttelt und sie nebeneinander legt

he can make the characters interact --

kann er die Charaktere interagieren lassen...

Video: Woof!

(Video: Wau!)

DM: inventing his own narrative.

...seine eigene Geschichte erfinden.

Video: Hello!

(Video: Hallo!)

DM: It's an open-ended story,

Es ist eine Geschichte mit offenem Ende

and he gets to decide how it unfolds.

und er kann entscheiden, wie sie sich entwickelt.

Video: Fly away, cat.

(Video: Fliegende Katze)

DM: So, the last example I have time to show you today

Das letzte Beispiel, für das ich heute Zeit habe, es zu zeigen,

is a music sequencing and live performance tool

ist ein Musik-Sequencer für Live-Auftritte,

that we've built recently,

das wir kürzlich entwickelt haben

in which Siftables act as sounds

und in dem Siftables als Töne,

like lead, bass and drums.

wie Führungsstimme, Bass und Schlagzeug agieren.

Each of these has four different variations,

Jedes hat vier verschiedene Variationen;

you get to choose which one you want to use.

Man kann auswählen, welche man nutzen möchte.

And you can inject these sounds into a sequence

Und man kann diese Töne in die Sequenz einspeisen,

that you can assemble into the pattern that you want.

die man wiederum in beliebigen Mustern anordnen kann.

And you inject it by just bumping up the sound Siftable against a sequence Siftable.

Und man speist sie ein, indem man einfach einen Ton-Siftable an einen Sequenz-Siftable hält.

There are effects that you can control live, like reverb and filter.

Dort sind Effekte, die man live verändern kann, wie z.B. Hall und Filter.

You attach it to a particular sound and then tilt to adjust it.

Man verbindet ihn mit einem bestimmten Ton und neigt ihn dann zum Einstellen.

And then, overall effects like tempo and volume

Und dann noch übergeordnete Effekte wie Tempo und Lautstärke,

that apply to the entire sequence.

die man auf die gesamte Sequenz anwendet.

So let's have a look.

Also schauen wir mal.

Video: (Music)

(Video: ♫ Musik ♫)

DM: We'll start by putting a lead

Wir beginnen, in dem wir die Führungsstimme

into two sequence Siftables, arrange them into a series,

in zwei Sequenz-Siftable einspeisen und diese in einer Reihe anordnen,

extend it, add a little more lead.

sie erweitern und ein bisschen mehr der Stimme hinzufügen.

Now I put a bass line in.

Jetzt füge ich einen Bass hinzu.

Video: (Music)

(Video: ♫ Musik ♫)

DM: Now I'll put some percussion in.

Jetzt werde ich noch etwas Schlagzeug dazu tun.

Video: (Music)

(Video: ♫ Musik ♫)

DM: And now I'll attach the filter to the drums, so I can control the effect live.

Und jetzt verbinde ich den Filter mit dem Schlagzeug, damit ich den Effekt live steuern kann.

Video: (Music)

(Video: ♫ Musik ♫)

DM: I can speed up the whole sequence

Ich kann die ganze Sequenz beschleunigen,

by tilting the tempo one way or the other.

indem ich das Tempo in die eine oder andere Richtung kippe.

Video: (Music)

(Video: ♫ Musik ♫)

DM: And now I'll attach the filter to the bass for some more expression.

Und jetzt verbinde ich den Filter noch mit dem Bass; für etwas mehr Ausdruck.

Video: (Music)

(Video: ♫ Musik ♫)

DM: I can rearrange the sequence while it plays.

Ich kann die Sequenz während sie abläuft umstellen.

So I don't have to plan it out in advance, but I can improvise,

Dadurch muss ich sie nicht im Vorfeld planen, sondern kann improvisieren;

making it longer or shorter as I go.

sie währenddessen verlängern oder verkürzen.

And now, finally, I can fade the whole sequence out

Und abschließend kann ich die ganze Sequenz ausblenden,

using the volume Siftable, tilted to the left.

indem ich den Lautstärke-Siftable nach links neige.

(Applause)

(Applaus)

Thank you.

Vielen Dank.

So, as you can see,

Wie Sie also sehen können,

my passion is for making new human-computer interfaces

liegt meine Begeisterung darin, neue Mensch-Computer-Schnittstellen zu entwickeln,

that are a better match to the ways our brains and bodies work.

die besser zu dem passen, wie unsere Gehirne und Körper arbeiten.

And today, I had time to show you one point in this new design space,

Und heute hatte ich Zeit, Ihnen einen Teil dieser neuen Design-Welt

and a few of the possibilities that we're working to bring out of the laboratory.

und einige der Möglichkeiten dessen zu zeigen, woran wir in unserem Labor arbeiten.

So the thought I want to leave you with

Der Gedanke, den ich Ihnen mit auf den Weg geben möchte,

is that we're on the cusp of this new generation of tools

ist dass wir an der Schwelle zu dieser neuen Generation von Werzeugen

for interacting with digital media

zur Interaktion mit digitalen Medien stehen,

that are going to bring information into our world

die Informationen in unsere Welt bringen,

on our terms.

die unseren Anforderungen entspricht.

Thank you very much.

Vielen Dank,

I look forward to talking with all of you.

ich freue mich auf die Gespräche mit Ihnen allen!

(Applause)

(Applaus)