Golan Levin makes art that looks back at you

Golan Levin hace arte que vuelve a mirarte

Traductor: Laura Corredor Velandia Revisor: Sebastian Betti

Hello! My name is Golan Levin.

¡Hola! Mi nombre es Golan Levin

I'm an artist and an engineer,

Soy artista e ingeniero

which is, increasingly, a more common kind of hybrid.

lo cual está siendo una especie de híbrido cada vez más común

But I still fall into this weird crack

Pero todavía caigo en este rompimiento extraño

where people don't seem to understand me.

donde la gente no parece entenderme.

And I was looking around and I found this wonderful picture.

Y estaba mirando y encontré esta foto maravillosa.

It's a letter from "Artforum" in 1967

Es una carta de “Artforum” de 1967

saying "We can't imagine ever doing a special issue

que dice “No podemos imaginar incluso en hacer un número especial

on electronics or computers in art." And they still haven't.

sobre electrónica o computadores en arte”. Y todavía no lo han hecho.

And lest you think that you all, as the digerati, are more enlightened,

y no sea que piensen que todos, como los digerati, son más iluminados.

I went to the Apple iPhone app store the other day.

El otro día fui a la tienda de aplicaciones para iPhone de Apple.

Where's art? I got productivity. I got sports.

¿Dónde está el arte? Hay productividad. Hay deportes.

And somehow the idea that one would want to make art for the iPhone,

Y de algún modo la idea de que uno quiera hacer arte para el iPhone,

which my friends and I are doing now,

que es lo que mis amigos y yo estamos haciendo ahora,

is still not reflected in our understanding

aún no se refleja en nuestro entendimiento

of what computers are for.

de para qué son los computadores.

So, from both directions, there is kind of, I think, a lack of understanding

Así que, desde los dos puntos, existe algo así como, creo, una falta de comprensión

about what it could mean to be an artist who uses the materials

acerca de lo que podría significar ser un artista o una artista que

of his own day, or her own day,

utiliza los materiales de su propio día,

which I think artists are obliged to do,

Lo que creo que los artistas están obligados a hacer,

is to really explore the expressive potential of the new tools that we have.

es explorar realmente el potencial expresivo de las nuevas herramientas que tenemos.

In my own case, I'm an artist,

En mi caso propio, soy un artista,

and I'm really interested in

y estoy realmente interesado en

expanding the vocabulary of human action,

expandir el vocabulario de la acción humana,

and basically empowering people through interactivity.

y básicamente dar poder a la gente a través de la interactividad.

I want people to discover themselves as actors,

Quiero que las personas se descubran a sí mismas como actores,

as creative actors, by having interactive experiences.

como actores creativos, mediante experiencias interactivas.

A lot of my work is about trying to get away from this.

Mucho de mi trabajo se trata de salir de esto.

This a photograph of the desktop of a student of mine.

Ésta es una fotografía del escritorio de uno de mis estudiantes.

And when I say desktop, I don't just mean

Y cuando digo escritorio, no sólo significa

the actual desk where his mouse has worn away the surface of the desk.

la mesa desde donde su ratón ha desgastado la superficie del escritorio.

If you look carefully, you can even see

Si mira cuidadosamente, incluso puede ver

a hint of the Apple menu, up here in the upper left,

una pista del menú de Apple, arriba en la parte superior izquierda,

where the virtual world has literally

en donde el mundo virtual literalmente

punched through to the physical.

ha traspasado al físico.

So this is, as Joy Mountford once said,

Entonces esto es, como dijo una vez Jon Mountford

"The mouse is probably the narrowest straw

“el ratón es probablemente el pitillo más estrecho

you could try to suck all of human expression through."

a través del cual puedes succionar toda la expresión humana”.

(Laughter)

(Risas)

And the thing I'm really trying to do is enabling people to have more rich

Y lo que estoy tratando de hacer realmente, es permitir que la gente tenga más

kinds of interactive experiences.

tipos de experiencias interactivas ricas.

How can we get away from the mouse and use our full bodies

Cómo podemos alejarnos del ratón y utilizar todo nuestro cuerpo

as a way of exploring aesthetic experiences,

como una forma de explorar experiencias estéticas

not necessarily utilitarian ones.

no necesariamente utilitarias.

So I write software. And that's how I do it.

Entonces escribo software. Y así es cómo lo hago.

And a lot of my experiences

Y muchas de mis experiencias

resemble mirrors in some way.

se asemejan a espejos de algún modo.

Because this is, in some sense, the first way,

Porque esto es, de alguna forma, el primer modo,

that people discover their own potential as actors,

en el que las personas descubren su propio potencial como actores

and discover their own agency.

y descubren su propia capacidad.

By saying "Who is that person in the mirror? Oh it's actually me."

Diciendo: "¿quién es esa persona en el espejo? oh, en realidad soy yo".

And so, to give an example,

Y así, para dar un ejemplo,

this is a project from last year,

este es un proyecto del año pasado.

which is called the Interstitial Fragment Processor.

Que se llama Procesador de Fragmentos Intersticiales.

And it allows people to explore the negative shapes that they create

Y permite que las personas exploren las formas negativas que crean

when they're just going about their everyday business.

cuando realizan simplemente sus asuntos cotidianos.

So as people make shapes with their hands or their heads

Así como la gente hace formas con sus manos o con sus cabezas

and so forth, or with each other,

y sucesivamente, o con otros,

these shapes literally produce sounds and drop out of thin air --

estas formas literalmente producen sonidos y una salida de aire ligero.

basically taking what's often this, kind of, unseen space,

Básicamente tomando, lo que es frecuentemente, este tipo de espacio invisible

or this undetected space, and making it something real,

o no detectado, y haciéndolo real,

that people then can appreciate and become creative with.

las personas lo pueden notar y se pueden volver creativas con él.

So again, people discover their creative agency in this way.

Así que, nuevamente, las personas descubren su capacidad creativa de esta manera.

And their own personalities come out

Y sus propias personalidades salen a flote

in totally unique ways.

de formas totalmente únicas.

So in addition to using full-body input,

Entonces además de utilizar todo el cuerpo como entrada,

something that I've explored now, for a while,

algo que he explorado desde hace un tiempo

has been the use of the voice,

ha sido el uso de la voz.

which is an immensely expressive system for us, vocalizing.

Lo que es un sistema inmensamente expresivo para nosotros, vocalizar.

Song is one of our oldest ways

La canción es una de las formas más viejas

of making ourselves heard and understood.

de hacernos escuchar y entender.

And I came across this fantastic research by Wolfgang Köhler,

Y entonces me crucé con esta fantástica investigación de Wolfgang Köhler,

the so-called father of gestalt psychology, from 1927,

el llamado padre de la psicología gestalt, desde 1927,

who submitted to an audience like yourselves

que envió a una audiencia como ustedes

the following two shapes.

las siguientes dos formas.

And he said one of them is called Maluma.

Y dijo que una de ellas se llama Maluma.

And one of them is called Taketa. Which is which?

y la otra se llama Taketa. ¿Cuál es cuál?

Anyone want to hazard a guess?

¿Alguien se arriesga a responder?

Maluma is on top. Yeah. So.

Maluma está arriba. Sí. Entonces.

As he says here, most people answer without any hesitation.

Como el dice aquí, la mayoría de la gente responde sin vacilar.

So what we're really seeing here is a phenomenon

Así que lo que estamos viendo aquí en realidad es un fenómeno

called phonaesthesia,

llamado fonestesia

which is a kind of synesthesia that all of you have.

que es un tipo de sinestesia que todos ustedes tienen.

And so, whereas Dr. Oliver Sacks has talked about

Y entonces, mientras que el Dr. Oliver Sacks ha hablado acerca

how perhaps one person in a million

de cómo, quizás una persona en un millón

actually has true synesthesia,

realmente tiene sinestesia,

where they hear colors or taste shapes, and things like this,

y escuchan colores o prueban formas, y cosas como éstas

phonaesthesia is something we can all experience to some extent.

la fonestesia es algo que todos podemos experimentar hasta cierto punto.

It's about mappings between different perceptual domains,

Se trata de mapeos entre ciertos dominios perceptuales,

like hardness, sharpness, brightness and darkness,

como dureza, nitidez, brillo y oscuridad,

and the phonemes that we're able to speak with.

y los fonemas con lo que podemos hablar.

So 70 years on, there's been some research where

Así que en 70 años, ha habido alguna investigación en la que

cognitive psychologists have actually sussed out

los psicólogos cognitivos han dilucidado en realidad

the extent to which, you know,

el punto al cual, uno sabe

L, M and B are more associated with shapes that look like this,

que L, M y B están asociados con formas que lucen así,

and P, T and K are perhaps more associated with shapes like this.

y P, T y K están quizá más asociadas con formas que lucen así.

And here we suddenly begin to have a mapping between curvature

y aquí de repente empezamos a tener un mapeo entre la curvatura

that we can exploit numerically,

que podemos explotar numéricamente,

a relative mapping between curvature and shape.

un mapeo relativo entre curvatura y [discurso].

So it occurred to me, what happens if we could run these backwards?

Entonces se me ocurrió, ¿qué pasaría si pudiéramos hacerlo al revés?

And thus was born the project called Remark,

y entonces nació el proyecto llamado Remark.

which is a collaboration with Zachary Lieberman

que es una colaboración con Zachary Lieberman

and the Ars Electronica Futurelab.

y Ars Electronica Futurelab.

And this is an interactive installation which presents

y ésta es una instalación interactiva que presenta

the fiction that speech casts visible shadows.

la ficción de que el discurso arroja sombras invisibles.

So the idea is you step into a kind of a magic light.

Así que la idea es que usted entre en una especie de luz mágica

And as you do, you see the shadows of your own speech.

y mientras lo hace, vea las sombras de su propio discurso.

And they sort of fly away, out of your head.

y como que vuelan, fuera de su cabeza.

If a computer speech recognition system

Si un sistema de reconocimiento computarizado

is able to recognize what you're saying, then it spells it out.

puede reconocer lo que está diciendo, entonces lo pronuncia.

And if it isn't then it produces a shape which is very phonaesthetically

Y si no, produce una forma que es muy fonestésica

tightly coupled to the sounds you made.

muy acoplada a los sonidos que usted hace.

So let's bring up a video of that.

Entonces veamos un video de eso.

(Applause)

(Aplausos)

Thanks. So. And this project here,

Gracias. Entonces, en este proyecto

I was working with the great abstract vocalist, Jaap Blonk.

estaba trabajando con el gran vocalista abstracto, Jaap Blonk.

And he is a world expert in performing "The Ursonate,"

Y él es un experto mundial interpretando "La Ursonata"

which is a half-an-hour nonsense poem

que es un poema sin sentido de media hora

by Kurt Schwitters, written in the 1920s,

de Kurt Schwitters, escrito en los años 20.

which is half an hour of very highly patterned nonsense.

Que es media hora de un sinsentido con un patrón.

And it's almost impossible to perform.

y es casi imposible de interpretar.

But Jaap is one of the world experts in performing it.

Pero Japp es uno de los expertos mundiales en interpretarlo.

And in this project we've developed

y en este proyecto desarrollamos

a form of intelligent real-time subtitles.

una forma de subtítulos inteligentes en tiempo real.

So these are our live subtitles,

Entonces esos son nuestros subtítulos en vivo,

that are being produced by a computer that knows the text of "The Ursonate" --

que están siendo producidos por un computador que sabe el texto de "La Ursonata",

fortunately Jaap does too, very well --

afortunadamente Japp también, muy bien.

and it is delivering that text at the same time as Jaap is.

Y está llevando el texto al mismo tiempo que Jaap.

So all the text you're going to see

Así que todo el texto que van a ver

is real-time generated by the computer,

está generado en tiempo real por la computadora.

visualizing what he's doing with his voice.

visualizando lo que él hace con su voz.

Here you can see the set-up where there is a screen with the subtitles behind him.

Aquí uno puede ver el montaje en donde hay una pantalla con subtítulos detrás de él.

Okay. So ...

Ok, entonces...

(Applause)

(Aplausos)

The full videos are online if you are interested.

Todos los videos están en línea si están interesados.

I got a split reaction to that during the live performance,

Tengo una reacción dividida a eso durante la interpretación en vivo.

because there is some people who understand

Porque hay algunas personas que entenderían

live subtitles are a kind of an oxymoron,

los subtítulos en vivo como una especie de oxímoron.

because usually there is someone making them afterwards.

Porque usualmente hay alguien haciéndolos después.

And then a bunch of people who were like, "What's the big deal?

Y luego un grupo de gente que estaba como "¿cuál es el punto?

I see subtitles all the time on television."

Veo subtítulos todo el tiempo en televisión".

You know? They don't imagine the person in the booth, typing it all.

¿Saben? Ellos no se imaginan la persona en la cabina, escribiendo todo.

So in addition to the full body, and in addition to the voice,

Entonces, adicional a todo el cuerpo, y adicional a la voz,

another thing that I've been really interested in,

otra cosa en la que me he interesado mucho,

most recently, is the use of the eyes,

más recientemente, es el uso de ojos,

or the gaze, in terms of how people relate to each other.

o la mirada fija, en términos de cómo la gente se relaciona entre sí.

It's a really profound amount of nonverbal information

Es una cantidad realmente profunda de información no verbal

that's communicated with the eyes.

que se comunica con los ojos.

And it's one of the most interesting technical challenges

Y es uno de los restos técnicos más interesantes

that's very currently active in the computer sciences:

que está recientemente muy activa en la ciencia de computadores.

being able to have a camera that can understand,

Ser capaz de tener una cámara que puede entender

from a fairly big distance away,

desde una distancia bastante lejana,

how these little tiny balls are actually pointing in one way or another

cómo esas pequeñas bolas están actualmente dirigiéndose de uno u otro modo,

to reveal what you're interested in,

para revelar en que está interesado,

and where your attention is directed.

y hacia dónde se dirige su atención.

So there is a lot of emotional communication that happens there.

Entonces está ocurriendo allí mucha comunicación emocional.

And so I've been beginning, with a variety of different projects,

Y he empezado una variedad de proyectos diferentes

to understand how people can relate to machines with their eyes.

para entender cómo la gente se puede relacionar con las máquinas con los ojos.

And basically to ask the questions:

Y básicamente para hacer las preguntas,

What if art was aware that we were looking at it?

¿Qué tal si el arte supiera que lo estamos observando?

How could it respond, in a way,

¿Cómo respondería, de algún modo,

to acknowledge or subvert the fact that we're looking at it?

reconocer o revertir el hecho de que lo estamos mirando?

And what could it do if it could look back at us?

¿Y qué tal si nos pudiera observar de vuelta?

And so those are the questions that are happening in the next projects.

Esas son las preguntas que están surgiendo en los próximos proyectos.

In the first one which I'm going to show you, called Eyecode,

El primero, que les voy a mostrar, llamado "Eyecode",

it's a piece of interactive software

es una pieza de software interactivo

in which, if we read this little circle,

en la que, si leemos este pequeño círculo,

"the trace left by the looking of the previous observer

"la señal que deja al mirar al observador previo

looks at the trace left by the looking of previous observer."

mira a la señal que deja mirar al observador previo".

The idea is that it's an image wholly constructed

La idea es que es una imagen completamente construida

from its own history of being viewed

de su propia historia de ser vista

by different people in an installation.

por diferentes personas en una instalación.

So let me just switch over so we can do the live demo.

Déjenme cambiar para que podamos ver la demostración en vivo.

So let's run this and see if it works.

Corramos esto y veamos si funciona.

Okay. Ah, there is lots of nice bright video.

Ok, Ah, hay mucho de buen video.

There is just a little test screen that shows that it's working.

Hay tan sólo una pruebita a la pantalla que muestra que está funcionando.

And what I'm just going to do is -- I'm going to hide that.

Y lo que voy a hacer ahora es esconder eso.

And you can see here that what it's doing

Y pueden ver aquí lo que está haciendo

is it's recording my eyes every time I blink.

Está grabando mis ojos cada vez que parpadeo.

Hello? And I can ... hello ... okay.

Hola? Y puedo... hola...ok.

And no matter where I am, what's really going on here

Y no importa dónde esté, lo que está ocurriendo aquí en verdad

is that it's an eye-tracking system that tries to locate my eyes.

es que es un sistema rastreador de ojos que trata de localizar mis ojos.

And if I get really far away I'm blurry.

Y si estoy muy lejos, soy borroso

You know, you're going to have these kind of blurry spots like this

Saben, van a tener este tipo de manchas borrosas

that maybe only resemble eyes in a very very abstract way.

que quizá sólo se parecen a ojos de una forma muy, muy abstracta

But if I come up really close and stare directly at the camera

Pero si me acerco mucho y miro directamente a la cámara

on this laptop then you'll see these nice crisp eyes.

en este portátil, entonces verán estos dulces ojos frescos.

You can think of it as a way of, sort of, typing, with your eyes.

Pueden pensar en esto como una forma de, como, escribir, con los ojos.

And what you're typing are recordings of your eyes

Y lo que están escribiendo son registros de sus ojos

as you're looking at other peoples' eyes.

mientras ven a los ojos de otros.

So each person is looking at the looking

Así cada persona está mirando la mirada

of everyone else before them.

de alguien más antes de ellos.

And this exists in larger installations

y existe en instalaciones más grandes

where there are thousands and thousands of eyes

en donde hay miles y miles de ojos

that people could be staring at,

a los que la gente puede estar mirando.

as you see who's looking at the people looking

mientras ven quién está mirando a la gente mirando

at the people looking before them.

a la gente mirando antes de ellos.

So I'll just add a couple more. Blink. Blink.

Agregaré un par más. Parpadeo. Parpadeo.

And you can see, just once again, how it's sort of finding my eyes

Y pueden ver, una vez más, cómo está como tratando de encontrar mis ojos

and doing its best to estimate when it's blinking.

y haciendo lo mejor para estimar cuando están parpadeando.

Alright. Let's leave that.

Bueno. Dejémoslo ahí.

So that's this kind of recursive observation system.

Es como un tipo de observación recursiva.

(Applause)

(Aplausos)

Thank you.

Gracias.

The last couple pieces I'm going to show

El último par de piezas que voy a mostrar

are basically in the new realm of robotics -- for me, new for me.

está básicamente en el nuevo reino de la robótica, para mí, nuevo para mí.

It's called Opto-Isolator.

Se llama el opto-aislante.

And I'm going to show a video of the older version of it,

Y voy a mostrar un video de la versión más antigua.

which is just a minute long. Okay.

que sólo es de un minuto. Ok.

In this case, the Opto-Isolator is blinking

En este caso, el opto-aislante está parpadeando

in response to one's own blinks.

en respuesta a los parpadeos de uno mismo.

So it blinks one second after you do.

Entonces parpadea un segundo después de que uno lo hace.

This is a device which is intended to reduce

Es un dispositivo que busca reducir

the phenomenon of gaze down to the simplest possible materials.

el fenómeno de mirar profundo a los materiales más sencillos posibles.

Just one eye,

Sólo un ojo,

looking at you, and eliminating everything else about a face,

mirándolo, y eliminando todo lo demás de una cara.

but just to consider gaze in an isolated way

Pero para considerar la mirada fija de forma aislada

as a kind of, as an element.

como una especie de elemento.

And at the same time, it attempts to engage in what you might call

Y al mismo tiempo, intenta involucrarse en lo que podrían llamar

familiar psycho-social gaze behaviors.

comportamientos familiares de mirada psicosocial.

Like looking away if you look at it too long

Como mirar a lo lejos si lo miran mucho

because it gets shy,

porque se pone tímido.

or things like that.

O cosas así.

Okay. So the last project I'm going to show

Ok. El último proyecto que voy a mostrar

is this new one called Snout.

es este nuevo llamado Hocico.

(Laughter)

(Risas)

It's an eight-foot snout,

Es un hocico de 2,5 metros,

with a googly eye.

con un ojo falso.

(Laughter)

(Risas)

And inside it's got an 800-pound robot arm

Y dentro tiene un robot de 360 kilos

that I borrowed,

que conseguí prestado,

(Laughter)

(Risas)

from a friend.

de un amigo.

(Laughter)

(Risas)

It helps to have good friends.

Ayuda tener buenos amigos.

I'm at Carnegie Mellon; we've got a great Robotics Institute there.

Estoy en Carnegie Mellon. Tenemos un gran Instituto de Robótica allí.

I'd like to show you thing called Snout, which is --

Me gustaría mostrarles la cosa llamada Hocico, que es...

The idea behind this project is to

La idea detrás del proyecto es

make a robot that appears as if it's continually surprised to see you.

hacer un robot que parezca continuamente sorprendido de verlos.

(Laughter)

(Risas)

The idea is that basically --

La idea es que básicamente...

if it's constantly like "Huh? ... Huh?"

si está constantemente como "¿Ehh? ... ¿Ehh?"

That's why its other name is Doubletaker, Taker of Doubles.

Por eso el otro nombre es "Doubletaker", tomador de dobles.

It's always kind of doing a double take: "What?"

Siempre está haciendo una toma doble: "¿Qué?"

And the idea is basically, can it look at you

Y la idea es básicamente, los puede mirar

and make you feel as if like,

y hacerlos sentir como si,

"What? Is it my shoes?"

"¿Qué? ¿son mis zapatos?

"Got something on my hair?" Here we go. Alright.

"¿tengo algo en el pelo?" Aquí vamos. Bien.

Checking him out ...

Mirándolo...

For you nerds, here's a little behind-the-scenes.

Para ustedes nerds, aquí un poco detrás de escenas,

It's got a computer vision system,

Tiene un sistema de visión computarizada

and it tries to look at the people who are moving around the most.

y trata de mirar a la gente que se mueve más.

Those are its targets.

Ésos son sus blancos.

Up there is the skeleton,

Arriba está el esqueleto,

which is actually what it's trying to do.

que es en realidad lo que está tratando de hacer.

It's really about trying to create a novel body language for a new creature.

Se trata en verdad de crear un nuevo lenguaje corporal para una nueva criatura.

Hollywood does this all the time, of course.

Hollywood lo hace todo el tiempo, por supuesto.

But also have the body language communicate something

Pero también el lenguaje corporal comunica algo

to the person who is looking at it.

a la persona que lo está mirando.

This language is communicating that it is surprised to see you,

Este lenguaje está comunicando que está sorprendido de verlos,

and it's interested in looking at you.

y está interesado en verlos.

(Laughter)

(Risas)

(Applause)

(Aplausos)

Thank you very much. That's all I've got for today.

Muchas gracias. Eso es todo lo que tengo para hoy.

And I'm really happy to be here. Thank you so much.

Y estoy muy feliz de estar aquí. Muchas gracias.

(Applause)

(Aplausos)