MotionComposer - La búsqueda de un mapeado musical coherente Robert Wechsler Valladolid, mayo 2012 the coh. i am speaking of is psychological one. i.e. there are many technical posssibilities today to turn body movt into sound or sound modulations. what this workshop concerns is about is how to choose. what about the movt. changes what about the sound. this stupid-sounding question is the key. my approach to this issue is based on my experiences as a dancer and choreographer. www.motioncomposer.org this presentation can be downloaded at: www.motioncomposer.org/ppt

„Bailar es bailar, hablar es hablar“ - M. Cunningham „Todo el mundo es un bailarín“ - R. Laban „Primero, danza; después, piensa“ - Estragón (S. Beckett) when to show which vids www.motioncomposer.org this presentation can be downloaded at: www.motioncomposer.org/ppt

Part 1: Sobre mí Part 2: Interactividad Part 3: Motion Tracking Part 4: Mapeado 20-40 min. when to show which vids

Parte 1: Sobre mí - New York, Nürnberg, Stuttgart, Weimar Palindrome Dance Company Trabajos con danza interactiva desde 1975 EyeCon con Frieder Weiss 1995-2005 Enseñanza de Motion Tracking MotionComposer, Bauhaus University Josepha Dietz, Dr. Stefan Fischer, Marcello Wallace

Influencias: Ciudad de Nueva York en la década de 1980 play: INTERACT 1,2, SHF, Glow, JENSEITS, BS, Human

John Cage Merce Cunningham when to show which vids John Cage Merce Cunningham

when to show which vids

Arte 2: Interactividad Actividad / respuesta Actividad / respuesta The mechane, 'theatrical machine', was a crane to which a cable with a harness for an actor was attached. It allowed an actor portraying a god or goddess to arrive from the sky. playing god... Actividad / respuesta Actividad / respuesta Actividad Respuesta

Danza + Música = ? The mechane, 'theatrical machine', was a crane to which a cable with a harness for an actor was attached. It allowed an actor portraying a god or goddess to arrive from the sky. playing god... Dibujos prehistóricoa, España ca. 4.000 aC

Tecnología utilizada para dar a los artistas la ilusión de „poder“ The mechane, 'theatrical machine', was a crane to which a cable with a harness for an actor was attached. It allowed an actor portraying a god or goddess to arrive from the sky. playing god... Teatro Dionisio, Atenas – 300 aC

Luis XIV - La megalomanía del “Rey Sol”

Gusto por los juguetes mecánicos y los sistemas autómatas how did i do that? so an important artist aspect is amplification of gesture

Cañones – Seguimos con la megalomanía…

La interactividad fue incorporada a las performances de artistas neoyorquinos durante los años 60’ y 70’ how did i do that? Robert Rauschenberg - "Pelican" 1963 Laurie Anderson - "Walking Solo for Tape Bow Violin" 1979

La performance interactiva hoy Diseño interactivo Gestualidad Captura del movimiento, sensores Entornos virtuales Respuestas sensibles Internet y performance Y mucho más... how did i do that?

Parte 3: Motion Tracking when to show which vids

Motion Capture vs. Motion Tracking Alto coste (ca. 200.000 €) Uso general en tiempo “no real” Uso en la recopilación de datos (investigación) y en la animación de carácter realista (películas, videojuegos, etc.) Motion tracking Menos información y equipamiento, más económico Vinculado a parámetros como la dinámica o el movimiento del cuerpo Uso en tiempo "real”

Sensores de Motion Tracking Sensores corporales Sensores espaciales kinds of sensors, kinds of processing, kinds of output

Sensores de Motion Tracking Sensores corporales body-worn electrodes EEG ECG EMG Touching joint bend-sensors accelerometers, other body-worn devices Sensores espaciales Cámaras de vídeo (ej. EyeCon) Cámaras infrarrojas Sensores en el suelo, en la pared, etc kinds of sensors, kinds of processing, kinds of output most are not very useful in terms of interaction

Parte 4: Mapeado y sinestesia

Sinestesia Dostoyovsky Kandinsky did I see it, or hear iT? Did I do it, or did I respond to it? Kandinsky

Danza + Música = ? it is a synaesthetic experience. involves a combination , overlapping of sense. they build something together that is greater than each separately. this is their real power. this is what we are after. i.e. humans and a unique , and deep rooted ability – Trieb – desire, to move to music. to correlate movement and music.

¿Qué es el mapeado? movimiento sonido produce but this NOT what we want. as artistsw we know that there is a difference between ....

¿Qué es el mapeado? Danza Música its nota technical task – its a huan one. it concerns human percpetion and human feelingsl . this means we have to think ina new way about and and in a new way about technology.

¿Qué es el mapeado? Danza Música

¿Qué es el mapeado? Danza Música ¿Correlación?

¿Qué es el mapeado? Correlaciones Danza Música turns on turns off toggle iterate raise lower complex continuous variables

¿Qué es el mapeado? Danza Correlaciones Música turns on turns off toggle iterate raise lower complex continuous variables

¿Qué es el mapeado? Danza Correlaciones Música

Número de mapeados (M) = Número de parámetros Input (I) x Número de relaciones (R) x Número de parámetros Output (O) M = I x R x O

¿Qué es el mapeado? Ofrece cientos de posibilidades. Casi todas las aplicaciones son inteligibles. Solo unas pocas son intuitivas.

Mapeado coherente – parámetros de movimiento

Mapeado coherente – parámetros de movimiento

Mapeado coherente – parámetros de movimiento 1) Eventos discretos

Mapeado coherente – parámetros de movimiento 1) Eventos discretos Acentos Paradas Comienzos Otros cambios instantáneos

Mapeado coherente – parámetros de movimiento 2) Tags

Mapeado coherente – parámetros de movimiento 3) Modulación

Mapeado coherente – parámetros de movimiento 4) Repetición y temporalización A, B, A, B, ... A, B, C, D, E, F, ... A, A, A, A, A, A,A, A, A, A, A, A, A, A,

Mapeado coherente – parámetros de movimiento 5) Asociaciones multi-dimensionales „cualitativas“

Gracias ¿Preguntas? ¿Ideas? robert@palindrome.de how did i do that? www.motioncomposer.org this presentation can be downloaded at: www.motioncomposer.org/ppt