Bipolar de James Alliban presenta un espejo audiovisual que genera un paisaje sonoro a partir de la presencia y el movimiento de sus sujetos. Los datos de audio resultantes (incluidos los del participante) se utilizan para transformar el cuerpo en un retrato distorsionado que fluctúa entre estados de caos y orden. El video también hace un trabajo tremendamente efectivo al capturar la fascinación infinita de los sujetos con la instalación, brindando gratificación instantánea y una sensación de posibilidades infinitas.
¿Cómo se te ocurrió la idea de este video?
Esta pieza comenzó como un experimento. Estaba hablando en un festival de diseño y me pidieron (junto con los otros oradores) que prepararan un breve video de "gracias por venir" para reproducir al final del evento. Quería hacer algo un poco más interesante que simplemente hablar en mi teléfono inteligente. Originalmente planeé hacer una aplicación de seguimiento de rostros que deformara y fallara mi cara en respuesta a mi discurso. Con el tiempo cambié esto a una experiencia de cuerpo entero usando la cámara Kinect.
Encontré este efecto que parecía tan dramático que decidí investigar más y publicar Bipolar (llamado así debido a las constantes fluctuaciones entre los estados de orden y el caos) en forma de un video corto. La gente comenzó a interesarse en exhibir la pieza, así que la modifiqué para convertirla en una instalación. El proyecto se convirtió en un esfuerzo de colaboración cuando Liam Paton de Silent Studios agregó un aspecto de sonido interactivo. Se ha exhibido en varios eventos y exposiciones desde entonces.
Nos encanta geek, así que consiéntanos, ¿qué estamos viendo aquí?
El efecto básico no está demasiado involucrado. Uso openFrameworks, que es un kit de herramientas de programación basado en artes de C ++. Alrededor de 30 veces por segundo, los datos de profundidad y la alimentación de video de una cámara Xbox Kinect se combinan para crear un modelo 3D de los visitantes. Utilizo los datos de sonido que provienen del micrófono para extruir cada segundo punto en el modelo 3D. Los puntos se extruyen en la dirección en que se enfrentan para proporcionar una estética espacial que no es realmente posible con los datos de una cámara estándar.
Más allá de esto, se involucra bastante. Hay muchas más cosas detrás de escena. Utilizo el poder de la tarjeta gráfica para suavizar el modelo 3D y calcular un montón de datos que acelera la aplicación y generalmente mejora el aspecto de la pieza. Tengo una interfaz de usuario dentro de la aplicación con aproximadamente 15-20 páginas de botones y controles deslizantes que me permiten ajustar la pieza hasta que esté satisfecho. En términos del sonido, el movimiento del participante se calcula y se envía a un software separado construido en Max / MSP por Liam. Luego crea el paisaje sonoro retorcido basado en la cantidad de actividad y varios otros factores, como la ubicación y la proximidad. Este audio es luego captado por el micrófono junto con cualquier otro sonido en el entorno y visualizado en el cuerpo del sujeto.
¿Cuál ha sido el aspecto más satisfactorio para ti de esta pieza en particular?
Si bien el proceso de aprendizaje y el acto de descubrimiento y casualidad fueron muy agradables, la mejor parte de este proyecto fue el resultado final. Ver a la gente descubrir e interactuar con la instalación por primera vez es una experiencia maravillosa, que disfruto por cada pieza que ofrezco al público. Estar de forma anónima al fondo de la sala y observar a la gente disfrutar de una experiencia inesperada en la que he trabajado mucho para crear siempre es muy gratificante.
¿Cuál es la última gran cosa que leíste, viste o escuchaste?
Fui a ver la nueva pieza "Momentum" de la Universidad de Virginia en la galería Barbican's Curve recientemente. Consiste en una serie de 12 péndulos mecánicos ligeros que se balancean uniformemente en el espacio oscuro. El efecto fue muy contemplativo y, al menos para mí, un poco extraño debido al comportamiento antinatural de estos focos de movimiento lento.
¿Que sigue?
Estoy hablando con un par de curadores sobre la exhibición de Bipolar, y mientras tanto sigo explorando nuevas formas de representar el cuerpo a través de la interactividad. Estoy trabajando en varios proyectos en este momento, algunos de los cuales están a punto de abandonar pronto, así que estén atentos.
