Una conversa amb Yagiz Mungan, artista de CODAME

Una sèrie d'entrevistes d'artistes i oradors destacades al festival CODAME ART + TECH [2018] d'Irene Malatesta

Yagiz Mungan, artista interdiscipinari

L’artista interdisciplinari Yagiz Mungan crea un treball que barreja VR / AR, so / música, interacció, performance, mons virtuals i jocs. Li interessa especialment les estratègies generatives de creació visual i de so, i les maneres d’utilitzar la tecnologia per empènyer els límits de la percepció humana i la resposta emocional. El seu treball sovint pretén recontextualitzar experiències familiars o abordar trobades tecnològiques estranyes en la vida moderna.

Mungan és llicenciat en enginyeria informàtica i MFA en arts interactives i ha exposat el seu treball a tot el món. Per al festival CODAME ART + TECH 2018, Mungan exhibirà un projecte anomenat Illy, una IA que es comunica mitjançant so sense llenguatge.

El CODAME Festival d’enguany, anomenat amb nom de codi #ARTOBOTS, comptarà amb 4 dies d’instal·lacions, tallers, xerrades i altres, tots centrats en l’influència en expansió de la intel·ligència artificial i la robòtica en el món modern. En aquesta conversa, Mungan discuteix aquests temes i altres, inclosos els seus antecedents i primers experiments de so, com barreja diversos mitjans tecnològics per crear nous mitjans de comunicació i com la VR pot ajudar-nos a experimentar allò impossible.

IM: Hola Yagiz, gràcies per acceptar xerrar. Ets un artista que treballa amb instal·lacions interactives, música interactiva i realitat mixta. Podríeu començar parlant una mica de qui sou i del tipus de feina que feu?

YM: M'agrada crear coses interactives o coses generatives, on l'ordinador o el programari formin part de l'experiència com a agent actiu. En aquell moment, vaig estudiar enginyeria i em vaig inspirar per mirar de fer més creatius els meus projectes. Vaig estudiar enfocaments algorítmics i generatius del meu treball. Vaig poder arribar fins on no hi havia cap usuari, però hi havia més expressió mitjançant programari. A partir d’aquí, vaig entrar en jocs: disseny de jocs i instal·lacions interactives.

Sempre vaig treballar amb música i art, però la tecnologia i l’art eren realment dues coses separades quan era més jove; no existien junts. La meva idea de combinar-los va créixer amb el pas del temps. A mesura que vaig entrar en la generació algorísmica, vaig escriure programari que componia música i creava visuals. Vaig entrar en sistemes amb els quals podeu interactuar, per crear música, vídeos, crear codi per a un joc o instal·lacions.

Realitat mixta o VR és un mitjà més per crear instal·lacions, si ho voleu. I en VR, no teniu cap limitació física del que podeu crear.

Sembla que podríeu descriure-vos principalment com a artista que treballa amb interactivitat i tots aquests mitjans diferents eren formes diferents per aconseguir-ho.

Aquesta és una manera de dir-ho, sí. A mi, diria artista “interdisciplinari”, perquè la codificació és el meu ofici. Per a mi, els sons sempre són els aspectes més importants d’una cosa: sempre intento que estigui centrada en el so o centrada en la música. Els visuals sempre hi són, però sempre intento que el so sigui una part molt important del projecte i construeix al seu voltant, en contraposició a: "Posem una mica de música en segon pla". En canvi, normalment vull fer-ho sobre la creació de música.

Això és interessant perquè és un punt de vista ben diferent sobre si la música és l'assumpte o si la música queda en segon pla. Heu comentat abans que la codificació és el vostre ofici. Tens un màster en Enginyeria Informàtica i també un MFA en art electrònic. Podríeu parlar una mica sobre els vostres antecedents i d’on veniu, i com vau decidir continuar aquest camí formatiu?

Jo vinc de Turquia. Des d’on sóc, a la meva infància, a principis dels anys 2000, era una cultura on, si sou un estudiant d’èxit, heu d’anar a estudiar determinades matèries. No he tingut massa opcions per triar, així que vaig estudiar Enginyeria.

Sempre vaig sentir que hi faltava alguna cosa. Quan vaig fer el màster vaig passar d’investigar què es pot fer amb la programació o l’enginyeria, fins a adonar-me, d’acord, puc fer servir aquesta obra per dissenyar la música que m’agrada. La tesi del meu màster va tractar sobre la creació de composicions algorítmicament. Un cop acabat amb això, vaig pensar que també volia una mica d’interacció amb els usuaris.

El meu segon màster va tractar l’art interactiu com a mitjà basat en el temps. Es va centrar en instal·lacions, més idees basades en l'art i en la interacció dels usuaris. Aquest era el meu camí.

El vostre camí creatiu té molt sentit: has estat desenvolupador d’UX, instructor d’universitat, has treballat en disseny de jocs… has fet moltes coses diferents, però tots han implicat aquest component de creativitat, creant alguna cosa i interactivitat. i enginyeria. També heu viatjat molt. Pots comentar les feines que has tingut i les ciutats on has estat?

Aquesta és una pregunta interessant perquè vaig passar tant temps a l'escola gradual. Quan es tracta de feines, els títols que he canviat, però el que faig és principalment el mateix. El que em sembla més interessant és el treball que faig fora dels meus "treballs" habituals. La gent que conec, la comunitat de tecnologia i art a San Francisco. Parlar amb persones d’aquesta comunitat sempre és més que entretingut, em fa sentir que necessito més. No de manera competitiva, però ja ho sabeu, em sento inspirat!

He estat a moltes ciutats. Vaig estar a Indiana després dels meus estudis de grau. He estat a Suècia i després un temps a Alemanya. Molt de temps a Turquia. Pel que fa a la comunitat d’arts, no puc comparar, digui, Indiana amb San Francisco, perquè és tan diferent. Aquí sempre hi ha gent nova per conèixer. Aquí hi ha tantes coses.

Pel que fa a la vostra tasca en particular, hi ha hagut algun projecte en concret que us hagi inspirat?

Sempre vaig estar involucrat en la música des dels set anys. El meu principal instrument és la guitarra. També jugo sintetitzadors. Crec que això va començar quan estava en una classe i vaig fer un codi de sonorització molt senzill i em va interessar anar més enllà. Vaig estudiar la recerca bàsica, hi ha moltes coses per fora i em vaig adonar que hi havia aquest camp que podia estudiar, la recerca per millorar-me.

Per la primera part, va ser una mica accidental. Per exemple, rebeu anuncis tot el temps, correus electrònics dels venedors i, tot això, consulteu el nou altaveu, sigui quin sigui. Recordo, vaig rebre el correu electrònic que deia que el nou altaveu tenia alguna resposta de freqüència particular i vaig pensar: "Els humans no ho sentim!" Em vaig inspirar per provar-ho. He creat un codi senzill per reproduir aquest so i, per descomptat, no podíem sentir res des del portàtil.

Aquest va ser només un experiment primerenc. Només em divertia, i em vaig adonar que realment puc fer música d'aquesta manera. Amb el pas del temps, vaig descobrir tota una gamma d’eines que les persones han utilitzat per a la tecnologia creativa. Va ser el primer pas per a mi.

Parlem una mica de la feina que esteu fent ara. Podríeu parlar una mica sobre els vostres projectes creatius actuals de què us emociona més i també de què us condueix a crear-los? Per què els fas, què vols comunicar més que tot?

Bé, la meva feina va per dos camins. De vegades, hi ha alguna cosa en art visual que vull investigar o alguna interacció amb els usuaris que tinc curiositat. Per tant, no hi ha cap missatge ni significat real, però només vull veure on acabo des d’una posició més estètica. De vegades, com si hi ha alguna cosa que em molesta o em fa pensar, en faig un tema.

Ara mateix estic avançant cap a més treballs amb visualitzadors musicals, creant paisatges abstractes a través de la música. Estic intentant apartar-me de les formes abstractes antigues i aprofundir en visuals amb aspectes més realistes. És un projecte divertit, buscant alguns efectes visuals que puc generar amb el so.

Què es tracta dels paisatges amb què estàs atret, per què els paisatges?

Bé, diria que no tan paisatge com la natura, sinó paisatges per exemple en una ciutat. Com quan s’asseu a una cafeteria i observeu la gent creuant els carrers. Puc crear una cosa així que seria impossible a la vida real, amb algunes persones que pugen cap amunt, algunes persones que es desplacen ...

I llavors puc fer servir la captura de moviment per crear-ho. M’interessa la ruptura, el fet que realment no existeixin o no puguin existir.

Per crear les vostres obres d’art, utilitzeu Unity i WebGL. Podeu parlar una mica més de suports i eines que feu servir per crear la vostra obra? Quins són els més importants per a vostè?

Sí, aquestes són les meves dues eines per a la visualització. M'agrada treballar en un espai, i treballar en espais físics és interessant, però no sempre assequible ni pràctic. Per això, m’agrada treballar en espais virtuals, o els combino, de manera que hi ha aspectes físics sobre aspectes virtuals. En aquests casos, faig servir Unity o WebGL.

El motiu pel qual podria triar un o l’altre és si en algun d’ells necessito alguna cosa concreta. Principalment trio en funció dels mitjans de distribució. Si necessito distribuir el treball en línia entre la gent, aniré a WebGL, a la manera del navegador, [com] utilitzar la biblioteca three.js per a que només pugueu compartir un enllaç i altres persones que tingueu accés. Per a una cosa basada en esdeveniments, m’agrada fer servir Unity. És molt divertit i fàcil d’utilitzar amb moltes funcions. És una mica més difícil de distribuir.

Una altra cosa [a considerar] és la fidelitat. Amb la meva habilitat, puc obtenir una millor qualitat a Unity, que és important de vegades. Per al so, és una mica interessant el so. M'encanta Unity, però les seves capacitats de creació de so són força limitades. La majoria de les vegades enllaço una altra cosa com MAX / MSP, que és com una eina de rendiment en directe, però que fa que el producte en general sigui més difícil de desplegar o enviar-lo a altres.

Quan treballo en un espai, m’agrada fer servir molts sons en aquest espai per barrejar-los de nou a l’exposició, capturar els sons i processar-los. De vegades també m’agrada presentar les meves pròpies composicions tocant guitarra com a part de les experiències que creo.

Segons la vostra opinió, quin tipus de contingut artístic emocional ara és possible a causa de les tecnologies de realitat mixta? Treballes en VR amb totes aquestes noves eines. Obviouslybviament, hi ha una raó per la qual els artistes volen utilitzar la VR per comunicar alguna cosa nova, oi?

Sí. Al món físic, hi ha moltes coses que no podeu assolir, a causa de limitacions bàsiques com l’espai o recursos com el diner, etcètera. El que ofereix VR és aquella capacitat de crear coses, com ara escenaris impossibles. Et posa dins de l’impossible des del punt de vista en primera persona. Tot es torna de sobte real, com "realment ho puc tocar".

Una de les coses que vaig fer recentment va ser una peça de VR i de dansa. Freya Olafson i jo vam crear aquests avatars ballants. Un cop creats prou, només se sentia com si estiguéssiu al sòl del bosc d’un avatars que es movien de forma robòtica. Va crear un sentiment d'allò sublim. No podeu arribar-hi amb molta facilitat. Arribar fins al punt més enllà del possible, però de sobte sentiu que, "realment estic aquí, això és impossible".

Hi ha qui utilitza la VR per recrear el món físic i, a continuació, només es diverteix, com una broma. Per a mi, el que és interessant és posar a la gent en aquestes situacions impossibles en què es converteix en una forma d’experiència molt personal. Ho veus amb els teus propis ulls. Realment pot arribar a tu.

Foto de Motion Aftereffect de Freya Bjorg Olafson i Yagiz Mungan, 2017. Foto de Robbie Sweeny. Aquest treball es va desenvolupar a través del programa de posada en pràctica CounterPulse Artist Residency Commissioning amb el suport del National Endowment for the Arts, la Fundació Zellerbach Family i el Ken Hempel Fund for the Arts. Més informació aquí

Els artistes porten molt de temps relacionat amb el sublim de diferents maneres. Creus que la tecnologia de realitat mixta és un mitjà o un espai especialment adequat per comunicar aquest sentiment?

Sí, crec que sí. És un mitjà per a qualsevol cosa, però el fet que puguis posar la gent a qualsevol lloc és molt fort perquè puguis posar la gent a qualsevol lloc on t’imagines, no només dins d’un paisatge, sinó també en un estat mental. No ha de ser un espai real sobre el qual poguessin mantenir-se. Podria ser un espai sense cap mena de terra, o podria ser un espai de transició. Podria ser només llums i sons. Podria ser un espai no. És bastant fort.

Absolutament. I què tal de mirar una mica el futur? Hi ha noves tecnologies de les quals us entusiasma que encara estiguin en prova de la fase de concepte, però, segons el vostre parer, no s’han utilitzat del tot per crear obres d’art d’alt nivell?

Sempre hi ha el progrés lineal que tenen les tecnologies emergents. Encara tractem amb els cables de xarxa i, de vegades, els cables es tornen més pertorbadors que la peça. Però pel que fa a les noves tecnologies, seria interessant veure cap a on va l’AR. En aquest moment, simplement es raspa el nivell de la superfície, però quan es fa realment allà, és difícil dir què és la realitat augmentada i el que és físic. Això serà interessant i espantós.

Vistes de Illy, de Yagiz Mungan

Parlem del proper festival ART CODAME ART + TECH. Ens podeu explicar quina és la feina que mostrareu?

Serà una versió d’Illy, que és un sistema semiintel·ligent. És un projecte que evoluciona des de fa temps.

El punt de partida de Illy va ser un dispositiu: Amazon Alexa o Google Home. Quan fas servir un d’aquests, estàs parlant amb una cosa de plàstic, dius alguna cosa i esperes un resultat. I quan obteniu aquest resultat, us sentiu feliços i satisfets, però quan diu: "Oh, no ho vaig aconseguir", us sentiu frustrats. Quan toca la cançó equivocada, et frustres.

Després d'haver passat aquest procés amb el meu accent, em molestava que em pogués frustrar amb un bot de plàstic. Després de pensar-ho una mica, em vaig plantejar Illy, que és una intel·ligència artificial que no entén anglès. Illy no entén cap idioma, no entén parlar, però intenta interpretar les veus, el to, el volum, les característiques principals del so i intenta respondre a partir d’aquest fet. Crea una comunicació on les dues parts saben que no hi haurà enteniment. Correspon a vosaltres posar qualsevol sentit al que diu.

Així que es comunica quan tornes a parlar, però no en idioma?

Exactament. La conversa s’assembla més a un monòleg, però depèn del que diu. Així que aquesta és la idea principal. També hi haurà un projecte VR o una gran pantalla. Podeu mirar a Illy com una cosa que només fa sonar cru, o podria ser la vostra mascota més comprensiva o que la pugueu tractar com un nadó. Com ja sabeu, parleu amb un nadó. Ja sabeu que el nadó no us entén. Es tracta de com et sents.

Què voldríeu que la gent sàpiga sobre la vostra feina? O què us agradaria que pensessin més quan vegin el vostre treball al festival?

Es tracta de la nostra relació amb les coses, amb la tecnologia, amb les AIs i de com els mitjans de comunicació canvien la nostra perspectiva i expectatives. Com per exemple, estic dient alguna cosa ara i ho podeu entendre perquè utilitzem els mateixos símbols, però si jo parli en turc això seria simplement soroll i completament poc valuós.

O considereu la relació entre persones com quan aneu a una cafeteria i demanen un cafè. La majoria de les vegades de la nostra vida precipitada és la nostra expectativa: "Aquesta persona em dóna un cafè". Si la persona intenta parlar petit amb tu, la teva reacció és: "He de marxar, per què perds el meu temps!" És tan petita cosa, però ser realment conscient d’aquestes interaccions, versus inconscientment conscients, és molt diferent.

És interessant pensar en com es combinen moltes vegades el so, la qualitat del so i el significat del llenguatge. Com en el vostre projecte: ho presentes així, però sabem que podem dir alguna cosa amb una veu molt dolça i viceversa. És molt fàcil per a nosaltres tenir aquestes expectatives que després són equivocades perquè només estem aplicant la nostra pròpia perspectiva.

Aquesta és la construcció cultural. Diferents idiomes tenen diferents maneres de dir. Amb alguns, per exemple, pronunciar alguna cosa "bonic" en un idioma pot semblar que us parli. Tots aquests significats són coses culturals que hem de posar d’acord en humans. Necessiteu el decodificador correcte per entendre-ho, i què passa si no el teniu?

Connecteu-vos i obteniu més informació sobre Yagiz Mungan al lloc CODAME:

Podeu trobar la seva obra al CODAME ART + TECH Festival [2018], una conferència de quatre dies amb tallers, xerrades i esdeveniments d'oci nocturn @ The Midway, San Francisco, del 4 al 7 de juny de 2018, amb el nom #ARTOBOTS:

CODAME ART + TECH Festival [2018] #ARTOBOTS

Irene Malatesta és escriptora, estratega creativa i amant de l'art digital a San Francisco. La podeu trobar a Twitter i Instagram @irenekaoru.