Golan Levin makes art that looks back at you

Golan Levin faz arte que olha de volta para você

Tradutor: Christine Veras Revisor: Moreno Barros

Hello! My name is Golan Levin.

Oi! Meu nome é Golan Levin.

I'm an artist and an engineer,

Eu sou um artista e um engenheiro

which is, increasingly, a more common kind of hybrid.

O que é, crescentemente, uma forma mais comum de híbrido.

But I still fall into this weird crack

Mas eu ainda caio nesta estranha fenda

where people don't seem to understand me.

onde as pessoas parecem não me entender.

And I was looking around and I found this wonderful picture.

E eu estava olhando por aí e encontrei esta imagem maravilhosa.

It's a letter from "Artforum" in 1967

É uma carta do "Artforum" de 1967

saying "We can't imagine ever doing a special issue

dizendo "Nós nunca poderemos imaginar a realização de um número especial

on electronics or computers in art." And they still haven't.

em eletrônica ou em arte computacional." E eles ainda não podem.

And lest you think that you all, as the digerati, are more enlightened,

E por receio que pensem que vocês, como os digerati, são mais esclarecidos,

I went to the Apple iPhone app store the other day.

eu fui a Apple iPhone app store outro dia.

Where's art? I got productivity. I got sports.

Onde está a arte? Eu recebi produtividade. Eu recebi esportes.

And somehow the idea that one would want to make art for the iPhone,

E de alguma forma a idéia que alguém queira fazer arte para o iPhone,

which my friends and I are doing now,

o que eu eu meus amigos estamos fazendo agora,

is still not reflected in our understanding

ainda não é pensada em nosso entendimento

of what computers are for.

de para que os computadores servem.

So, from both directions, there is kind of, I think, a lack of understanding

Assim, em ambas as direções, existe algo como, uma falta de entendimento

about what it could mean to be an artist who uses the materials

sobre o que pode significar ser um artista que utiliza materiais

of his own day, or her own day,

do próprio cotidiano dele, ou do próprio cotidiano dela.

which I think artists are obliged to do,

O que eu considero que os artistas são obrigados a fazer,

is to really explore the expressive potential of the new tools that we have.

é realmente explorar o potencial expressivo das novas ferramentas que nós temos.

In my own case, I'm an artist,

No meu próprio caso, eu sou um artista,

and I'm really interested in

e eu estou realmente interessado em

expanding the vocabulary of human action,

expandir o vocabulário de ação humana,

and basically empowering people through interactivity.

e basicamente dar possibilidade às pessoas através da interatividade.

I want people to discover themselves as actors,

Eu quero que as pessoas descubram a si mesmas como agentes,

as creative actors, by having interactive experiences.

como agentes criativos, através de experiências interativas.

A lot of my work is about trying to get away from this.

Muito do meu trabalho é sobre tentar sair disso.

This a photograph of the desktop of a student of mine.

Essa é uma fotografia da área de trabalho de um aluno meu.

And when I say desktop, I don't just mean

E quando eu digo área de trabalho, eu não quero dizer apenas

the actual desk where his mouse has worn away the surface of the desk.

a mesa real onde seu mouse desgastou a superfície da mesa.

If you look carefully, you can even see

Se olhar atentamente, você pode até ver

a hint of the Apple menu, up here in the upper left,

uma sugestão do Apple menu, aqui em cima à esquerda,

where the virtual world has literally

onde o mundo virtual literalmente

punched through to the physical.

encontra o físico.

So this is, as Joy Mountford once said,

Então isto é, como Joy Mountford certa vez disse,

"The mouse is probably the narrowest straw

"O mouse é provavelmente o canudo mais estreito

you could try to suck all of human expression through."

pelo qual se poderia sugar toda a expressão humana."

(Laughter)

(Risos)

And the thing I'm really trying to do is enabling people to have more rich

E o que estou realmente tentando fazer é possibilitar que as pessoas tenham formas mais ricas

kinds of interactive experiences.

de experiências interativas.

How can we get away from the mouse and use our full bodies

Como nós podemos nos livrar do mouse e usar nosso corpo inteiro

as a way of exploring aesthetic experiences,

como forma de explorar experiências estéticas,

not necessarily utilitarian ones.

não necessariamente utilitárias.

So I write software. And that's how I do it.

Então eu escrevi um programa. E foi assim que fiz.

And a lot of my experiences

Muitas de minhas experiências

resemble mirrors in some way.

assemelham-se a espelhos de alguma forma.

Because this is, in some sense, the first way,

Porque este é, em algum sentido, a primeira maneira

that people discover their own potential as actors,

que as pessoas descobrem o seu próprio potencial como agentes,

and discover their own agency.

e descobrem sua própria função.

By saying "Who is that person in the mirror? Oh it's actually me."

Dizendo "Quem é esta pessoa no espelho? Oh sou eu mesmo."

And so, to give an example,

Então, para dar um exemplo,

this is a project from last year,

este é um projeto do ano passado.

which is called the Interstitial Fragment Processor.

Que é chamdo de Processador de Fragmentos Interseccionais.

And it allows people to explore the negative shapes that they create

E ele permite que as pessoas explorem as formas negativas que elas criam

when they're just going about their everyday business.

no dia-a-dia.

So as people make shapes with their hands or their heads

Assim enquanto as pessoas fazem formas com suas mãos ou suas cabeças

and so forth, or with each other,

e assim por diante, ou utilizando umas as outras,

these shapes literally produce sounds and drop out of thin air --

essas formas literalmente produzem sons e caem no ar.

basically taking what's often this, kind of, unseen space,

Basicamente utilizando este certo espaço não visto,

or this undetected space, and making it something real,

ou indetectável, e tornando-o algo real,

that people then can appreciate and become creative with.

que as pessoas podem apreciar e se tornar criativas.

So again, people discover their creative agency in this way.

Assim novamente, as pessoas descobrem sua função criativa dessa maneira.

And their own personalities come out

E suas próprias personalidades surgem

in totally unique ways.

de maneiras totalmente únicas.

So in addition to using full-body input,

Assim em complemento ao uso do corpo todo como mecanismo de entrada,

something that I've explored now, for a while,

algo que venho explorando, há algum tempo,

has been the use of the voice,

tem sido o uso da voz.

which is an immensely expressive system for us, vocalizing.

Que é um sistema extremamente expressivo para nós, vocalização.

Song is one of our oldest ways

O canto é uma das mais antigas formas

of making ourselves heard and understood.

de nos fazermos escutar e entender.

And I came across this fantastic research by Wolfgang Köhler,

E eu encontrei essa fantástica pesquisa de Wolfang Kohler,

the so-called father of gestalt psychology, from 1927,

o tão chamado pai da psicologia gestalt, de 1927,

who submitted to an audience like yourselves

que submeteu a uma audiência como vocês

the following two shapes.

as duas seguintes formas.

And he said one of them is called Maluma.

E ele disse que uma delas se chama Maluma.

And one of them is called Taketa. Which is which?

E a outra se chama Taketa. Qual é qual?

Anyone want to hazard a guess?

Alguém gostaria de tentar adivinhar?

Maluma is on top. Yeah. So.

Maluma está acima. Sim. Então.

As he says here, most people answer without any hesitation.

Como ele diz aqui, a maioria das pessoas responde sem nenhuma hesitação.

So what we're really seeing here is a phenomenon

Então o que nós realmente estamos vendo aqui é um fenômeno

called phonaesthesia,

chamado fono-estesia.

which is a kind of synesthesia that all of you have.

Que é uma forma de sinestesia que todos nós temos.

And so, whereas Dr. Oliver Sacks has talked about

Assim, o Dr Oliver Sacks falou sobre

how perhaps one person in a million

como talvez uma pessoa em um milhão

actually has true synesthesia,

realmente possua verdadeira sinestesia,

where they hear colors or taste shapes, and things like this,

em que elas escutam as cores e sentem o gosto das formas, e coisas deste tipo.

phonaesthesia is something we can all experience to some extent.

Fono-estesia é algo que todos podemos experimentar até certo ponto.

It's about mappings between different perceptual domains,

É como fazer um mapeamento de diferentes domínios perceptivos.

like hardness, sharpness, brightness and darkness,

como duro, afiado, claro e escuro,

and the phonemes that we're able to speak with.

e os fonemas com os quais podemos falar.

So 70 years on, there's been some research where

Assim 70 anos após, aconteceram algumas pesquisas nas quais

cognitive psychologists have actually sussed out

psicólogos cognitivos realmente conseguiram perceber

the extent to which, you know,

a extensão com a qual,

L, M and B are more associated with shapes that look like this,

L, M e B estão mais associadas com formas que se parecem com essas.

and P, T and K are perhaps more associated with shapes like this.

e P, T e K estariam talvez mais associadas com formas como essas.

And here we suddenly begin to have a mapping between curvature

E de repente nós começamos a obter um mapeamento entre a curvatura

that we can exploit numerically,

que podemos explorar numericamente,

a relative mapping between curvature and shape.

mapeando relativamente entre a curvatura e a forma.

So it occurred to me, what happens if we could run these backwards?

Assim me ocorreu, o que aconteceria se conseguissemos rodá-los de trás para frente?

And thus was born the project called Remark,

E assim nasceu o projeto chamado Remark.

which is a collaboration with Zachary Lieberman

Que é uma colaboração com Zachary Lieberman

and the Ars Electronica Futurelab.

e o Ars Electronica Futurelab.

And this is an interactive installation which presents

E está é uma instalação interativa que apresenta

the fiction that speech casts visible shadows.

a ficção de que a fala cria sombras visíveis.

So the idea is you step into a kind of a magic light.

Assim a idéia é que você vá em direção um tipo de luz mágica.

And as you do, you see the shadows of your own speech.

E enquanto você o faz, você vê as sombras de sua própria fala.

And they sort of fly away, out of your head.

E elas meio que voam, para fora da sua cabeça.

If a computer speech recognition system

Com um sistema de reconhecimento de fala por computador

is able to recognize what you're saying, then it spells it out.

é possível reconhecer o que você está dizendo, para então expelir.

And if it isn't then it produces a shape which is very phonaesthetically

E se este não for o caso ele produz uma forma que é fono-esteticamente

tightly coupled to the sounds you made.

associada aos sons que você fez.

So let's bring up a video of that.

Então vamos trazer um vídeo sobre isso.

(Applause)

(Aplausos)

Thanks. So. And this project here,

Obrigado. Então. Nesse projeto aqui,

I was working with the great abstract vocalist, Jaap Blonk.

eu estava trabalhando com o grande vocalista abstrato, Jaap Blonk.

And he is a world expert in performing "The Ursonate,"

E ele é um expert mundial em interpretar "A Ursonate",

which is a half-an-hour nonsense poem

que é um poema nonsense de meia hora

by Kurt Schwitters, written in the 1920s,

de Kurt Schwitters, escrito na década de 1920.

which is half an hour of very highly patterned nonsense.

Ele é meia hora de muito nonsense rebuscado.

And it's almost impossible to perform.

E é quase impossível de interpretá-lo.

But Jaap is one of the world experts in performing it.

Mas Jaap é um dos grandes experts do mundo a interpretá-lo.

And in this project we've developed

E neste projeto nós desenvolvemos

a form of intelligent real-time subtitles.

uma forma inteligente de legendas em tempo real.

So these are our live subtitles,

Então estas são nossas legendas,

that are being produced by a computer that knows the text of "The Ursonate" --

que estão sendo produzidas por um computador que conhece o texto "A Ursonate"

fortunately Jaap does too, very well --

felizmente Jaap também o conhece, muito bem.

and it is delivering that text at the same time as Jaap is.

E ele está exibindo o texto ao mesmo tempo em que Jaap fala.

So all the text you're going to see

Assim, todo o texto que vocês irão ver

is real-time generated by the computer,

foram gerados em tempo real pelo computador,

visualizing what he's doing with his voice.

visualizando o que ele está fazendo com sua voz.

Here you can see the set-up where there is a screen with the subtitles behind him.

Aqui vocês podem ver a cena onde tem uma tela com as legendas atrás dela.

Okay. So ...

Ok. Então...

(Applause)

(Aplausos)

The full videos are online if you are interested.

O vídeo na íntegra está online caso vocês estejam interessados.

I got a split reaction to that during the live performance,

Obtive reações distintas durante a performance ao vivo.

because there is some people who understand

Porque tem algumas pessoas que entendem que

live subtitles are a kind of an oxymoron,

legendas ao vivo são um tipo de oximoro.

because usually there is someone making them afterwards.

Porque normalmente tem alguém os produzindo subsequentemente.

And then a bunch of people who were like, "What's the big deal?

E então um grupo de pessoas estavam tipo, "O que tem demais?

I see subtitles all the time on television."

Eu vejo legendas o tempo todo na televisão."

You know? They don't imagine the person in the booth, typing it all.

Vocês percebem? Eles não imaginam a pessoa no compartimento, digitando tudo.

So in addition to the full body, and in addition to the voice,

Assim em acréscimo ao corpo inteiro, e em acréscimo à voz,

another thing that I've been really interested in,

outra coisa que tem me interessado muito,

most recently, is the use of the eyes,

mais recentemente, é o uso dos olhos,

or the gaze, in terms of how people relate to each other.

ou do olhar intenso, em termos de como as pessoas relacionam-se umas com as outras.

It's a really profound amount of nonverbal information

É realmente uma grande quantidade de informação não verbal

that's communicated with the eyes.

que é comunicada com os olhos.

And it's one of the most interesting technical challenges

E é um dos mais interessantes desafios tecnológicos

that's very currently active in the computer sciences:

ativo atualmente na ciência da computação.

being able to have a camera that can understand,

Ter uma câmera capaz de entender

from a fairly big distance away,

de uma distância realmente considerável,

how these little tiny balls are actually pointing in one way or another

como essas pequenas bolas estão realmente apontando em uma direção ou em outra,

to reveal what you're interested in,

revelando se você está interessado,

and where your attention is directed.

e quando sua atenção é direcionada.

So there is a lot of emotional communication that happens there.

Então existe muita comunicação emocional acontecendo aí.

And so I've been beginning, with a variety of different projects,

E então eu comecei, com uma variedade de diferentes projetos,

to understand how people can relate to machines with their eyes.

a entender como as pessoas podem relacionar-se com as máquinas com os seus olhos.

And basically to ask the questions:

E basicamente a fazer as perguntas,

What if art was aware that we were looking at it?

E se a arte estivesse atenta que nós estamos olhando para ela?

How could it respond, in a way,

Como ela responderia, de certa forma,

to acknowledge or subvert the fact that we're looking at it?

para conhecer ou subverter o fato de que nós estamos olhando para ela?

And what could it do if it could look back at us?

E o que ela faria se pudesse olhar de volta para nós?

And so those are the questions that are happening in the next projects.

E então estas são as questões que estão acontecendo nos próximos projetos.

In the first one which I'm going to show you, called Eyecode,

No primeiro, que eu vou mostrar a vocês, chamado Eyecode,

it's a piece of interactive software

é uma peça de programa interativo

in which, if we read this little circle,

na qual, se lermos neste pequeno círculo,

"the trace left by the looking of the previous observer

o caminho deixado pelo olhar do observador anterior

looks at the trace left by the looking of previous observer."

olha para o caminho deixado pelo observador anterior.

The idea is that it's an image wholly constructed

A idéia é de uma imagem inteiramente construída

from its own history of being viewed

pela sua própria história de ser vista

by different people in an installation.

por diferentes pessoas em uma instalação.

So let me just switch over so we can do the live demo.

Assim deixe-me apenas trocar para que possamos fazer uma demonstração ao vivo.

So let's run this and see if it works.

Então vamos rodar isto e ver se funciona.

Okay. Ah, there is lots of nice bright video.

Ok. Ah, e tem muitos vídeos bons e claros.

There is just a little test screen that shows that it's working.

Este é apenas um pequeno teste que mostra que está funcionando.

And what I'm just going to do is -- I'm going to hide that.

E o que eu fazer agora é esconder isto.

And you can see here that what it's doing

E vocês poderão ver aqui que o que está sendo feito

is it's recording my eyes every time I blink.

é uma gravação dos meus olhos toda vez que eu pisco.

Hello? And I can ... hello ... okay.

Olá? E eu posso... olá... ok.

And no matter where I am, what's really going on here

E não importa onde eu esteja, o que realmente está acontecendo aqui

is that it's an eye-tracking system that tries to locate my eyes.

é que esse sistema de rastro de olhos tenta localizar meus olhos.

And if I get really far away I'm blurry.

E seu fico muito afastado eu fico desfocado.

You know, you're going to have these kind of blurry spots like this

Você sabe, você terá locais desfocados como este

that maybe only resemble eyes in a very very abstract way.

que talvez assemelhem-se a olhos de uma forma muito muito abstrata.

But if I come up really close and stare directly at the camera

Mas se eu chego muito perto e encaro diretamente a câmera

on this laptop then you'll see these nice crisp eyes.

neste laptop aí vocês verão esses bons e definidos olhos.

You can think of it as a way of, sort of, typing, with your eyes.

Você pode pensar nisso como uma forma de, um tipo de, digitação, com seus olhos.

And what you're typing are recordings of your eyes

E o que você está digitando são gravações dos seus olhos

as you're looking at other peoples' eyes.

como se você estivesse olhando para os olhos de outras pessoas.

So each person is looking at the looking

Assim cada pessoa está olhando para o olhar

of everyone else before them.

de todos aqueles antes dele.

And this exists in larger installations

E isso existe em instalações maiores

where there are thousands and thousands of eyes

onde há milhares e milhares de olhos

that people could be staring at,

que as pessoas podem encarar,

as you see who's looking at the people looking

enquanto você vê quem está olhando para as pessoas olhando

at the people looking before them.

e as pessoas que olharam antes delas.

So I'll just add a couple more. Blink. Blink.

Então eu vou apenas adicionar alguns mais. Pisca. Pisca.

And you can see, just once again, how it's sort of finding my eyes

E você pode ver, mais uma vez, como ele tenta encontrar os meus olhos

and doing its best to estimate when it's blinking.

fazendo o melhor para estimar quando estou piscando.

Alright. Let's leave that.

Tudo bem. Vamos deixar isto.

So that's this kind of recursive observation system.

Então este foi um tipo de sistema de observação repetitivo.

(Applause)

(Aplausos)

Thank you.

Obrigado.

The last couple pieces I'm going to show

As duas últimas peças que vou mostrar

are basically in the new realm of robotics -- for me, new for me.

estão basicamente no novo domínio da robótica, para mim, novo para mim.

It's called Opto-Isolator.

É chamado Opto-Isolator.

And I'm going to show a video of the older version of it,

E eu vou mostrar um vídeo de uma versão mais antiga dele.

which is just a minute long. Okay.

Possui apenas um minuto de duração. Ok.

In this case, the Opto-Isolator is blinking

Neste caso, o Opto-Isolator está piscando

in response to one's own blinks.

em resposta à piscada de outro.

So it blinks one second after you do.

Assim ele pisca um segundo depois de você piscar.

This is a device which is intended to reduce

Este é um aparato que objetiva reduzir

the phenomenon of gaze down to the simplest possible materials.

o fenômeno do olhar em outra direção aos materiais mais simples possíveis.

Just one eye,

Apenas um olho,

looking at you, and eliminating everything else about a face,

olhando para você, e eliminando todo o resto do rosto.

but just to consider gaze in an isolated way

Mas apenas considerando o olhar intenso de uma forma isolada.

as a kind of, as an element.

algo como um elemento.

And at the same time, it attempts to engage in what you might call

E ao mesmo tempo, ele tenta se engajar naquilo que você pode chamar

familiar psycho-social gaze behaviors.

de comportamento familiar psico-social de olhar intenso.

Like looking away if you look at it too long

Como olhar para outro lado se você o ficar encarando por muito tempo

because it gets shy,

pois ele fica tímido.

or things like that.

Ou coisas desse tipo.

Okay. So the last project I'm going to show

Ok. Então o último projeto que eu vou mostrar

is this new one called Snout.

é novo e chama-se Snout.

(Laughter)

(Risos)

It's an eight-foot snout,

Ele é uma tromba de 2 metros e meio,

with a googly eye.

com um olho saliente.

(Laughter)

(Risos)

And inside it's got an 800-pound robot arm

E dentro dele está um braço robô de 300 kilos

that I borrowed,

que eu peguei emprestado,

(Laughter)

(Risos)

from a friend.

de um amigo.

(Laughter)

(Risos)

It helps to have good friends.

Ajuda ter bons amigos.

I'm at Carnegie Mellon; we've got a great Robotics Institute there.

Eu estou em Carnegie Mellon. Nós temos um ótimo instituto de robótica lá.

I'd like to show you thing called Snout, which is --

Eu gostaria de mostrar a vocês o chamado Snout, que é --

The idea behind this project is to

A idéia por trás deste projeto é

make a robot that appears as if it's continually surprised to see you.

fazer um robô que parece continuamente surpreso ao ver você.

(Laughter)

(Risos)

The idea is that basically --

A idéia é basicamente --

if it's constantly like "Huh? ... Huh?"

como se ele estivesse constantemente tipo "Huh? ...Huh?"

That's why its other name is Doubletaker, Taker of Doubles.

É por isto que o outro nome dele é Doubletaker, Observador Surpreso.

It's always kind of doing a double take: "What?"

Ele está sempre olhando para você com surpresa: "O quê?"

And the idea is basically, can it look at you

E a idéia é basicamente, se ele pode olhar para você

and make you feel as if like,

e fazer você se sentir como,

"What? Is it my shoes?"

"O quê? São os meus sapatos?"

"Got something on my hair?" Here we go. Alright.

"Tenho algo no meu cabelo?" Aqui vamos nós. Tudo certo.

Checking him out ...

Checando ele.

For you nerds, here's a little behind-the-scenes.

Para vocês nerds, aqui está um pouquinho dos bastidores.

It's got a computer vision system,

Ele possui um sistema de visão por computador.

and it tries to look at the people who are moving around the most.

E ele tenta olhar para as pessoas que estão se movimentando mais.

Those are its targets.

Estes são seus alvos.

Up there is the skeleton,

Aqui em cima é o esqueleto.

which is actually what it's trying to do.

Que é exatamente o que ele está tentando fazer.

It's really about trying to create a novel body language for a new creature.

É realmente sobre tentar criar uma nova forma de linguagem corporal para esta nova criatura.

Hollywood does this all the time, of course.

Hollywood faz isso o tempo todo, é claro.

But also have the body language communicate something

Mas também deixar a linguagem corporal comunicar algo.

to the person who is looking at it.

para a pessoa que está olhando para ele.

This language is communicating that it is surprised to see you,

Está linguagem está comunicando que está surpreso em ver você,

and it's interested in looking at you.

e está interessado em olhar para você.

(Laughter)

(Risos)

(Applause)

(Aplausos)

Thank you very much. That's all I've got for today.

Muito obrigada. Isso é tudo que tenho para hoje.

And I'm really happy to be here. Thank you so much.

Eu estou muito feliz de estar aqui. Muito obrigado a todos.

(Applause)

(Aplausos)