AudioGames es una instalación sonora interactiva que permite al usuario experimentar de un modo lúdico en un espacio sonoro tridimensional, interactuando con él y con los objetos que lo pueblan, mediante los movimientos de su cuerpo en el espacio. Estos objetos son invisibles e intangibles, aunque en el universo virtual tienen una masa y peso específicos y su propio comportamiento físico. Cuando el jugador choca con ellos, éstos se mueven y pueden rebotar por el espacio de juego generando una composición sonora a tiempo real.
La posición del usuario en el espacio es detectada por un software de tracking hecho a medida, creando una interacción entre el mundo virtual y el real. Hemos creado un programa de sonido basado en los principios sinestésicos de asociación visión/sonido generando sonidos para el mundo 3D en tiempo real dependiendo de la posición del usuario y sus movimientos en el terreno de juego. El usuario, que puede ser invidente, se mueve en un entorno sonoro virtual (4x4m2) interactuando con un entorno sonoro aumentado tridimensional en tiempo real. Mientras el público puede ver la interacción del usuario en el espacio real al mismo tiempo que tiene acceso a la visualización 3D de la interacción del usuario con el espacio sonoro, en una pantalla fuera del marco de visión del usuario.
Nos basamos en el gameplay del Comecocos para fijar las reglas básicas del primer juego. Audiogames encuentra su inspiración en los estudios sobre sinestesia, elaborando nuevos modos de investigación -personal y colectiva- de las relaciones entre sonido y visión. El efecto sinestésico está centrado en el espectador, que traduce, de modo significativo, la visualización del juego en sonido. A través de este proyecto experimentamos con otras interfaces tecnológicas no orientadas a la visión, tratando de construir un espacio de juego común para ciegos y videntes.
Encontramos aquí un interesante campo de experimentación que puede llevarnos a una nueva relación con el espacio y la tecnología a través del sonido
DESCRIPCIÓN TÉCNICA
El área total de la instalación es de alrededor de los 10x5m. El área de juego es un área exagonal de 5x5m (ver dibujo a continuación).
Cuatro programas están funcionando al mismo tiempo:
- un software de tracking que registra los movimientos del usuario en el área de juego
- un software de sonido que sonifica los objetos espacializándolos
- un software 3D que visualiza los objetos y calcula sus parámetros físicos
- un software de orientación para smartphones android que detecta la orientación del jugador
El software de tracking ha sido realizado empleando Pure Data y dos kinects situadas en los extremos del área de la instalación. Los datos del tracking son enviados al Blender game engine mediante OpenSoundControl y son utilizados para mover el avatar del usuario en el mundo virtual. La orientación del jugador se obtiene mediante OSC software para android 2.3 y enviada al motor de juego utilizando una red inalámbrica. Los cálculos de los parámetros físicos y las posiciones de los objetos son enviados a Pure Data para la espacialización sonora. Finalmente de la salida de audio se envía a los auriculares inalámbricos a través de frecuencias de radio. La salida del vídeo final es proyectada en la pantalla.
HISTORIA Y DESARROLLO ACTUAL
AudioGames comienza como uno de los proyectos seleccionados para ser desarrollados durante el PlayLab, un taller de creación de videojuegos experimentales organizado por ARSGAMES y MediaLab-Prado, con el patrocinio de PlayStation, que se celebró del 21 al 24 de enero y del 4 al 7 de febrero de 2010 en MediaLab-Prado, Madrid. El primer prototipo de audiojuego que desarrollamos en PlayLab consiste en un espacio sonificado interactivo desarrollado por Euridice Cabañes Martinez, Luca Carrubba, Óscar Martín, Carlos Padial y Jaume Castells.
Ese mismo año, el primer prototipo de AudioGames obtiene la Mención Especial en las ayudas para la investigación y producción de Telenoika 2010.
Audiogames es ahora un proyecto de innovación tecnológica o industrial de ARSGAMES coordinado por Eurídice Cabañes, Luca Carrubba y Carlos Padial.
En 2012 la versión actual de AudioGames:
Ha sido seleccionado de un total de 367 proyectos de 22 países distintos para ser mostrada durante el festival IN-SONORA.
Ha obtenido una residencia de producción en Espacio Trapezio.
Ha obtenido una residencia artística en LABoral Art and Industrial Creation Center donde estamos colaborando con ONCE Asturias para mejorar la instalación.
PlayLab 3 AudioGames ha sido uno de los proyectos seleccionados en la convocatoria Stress Test organizada por Espacio Trapezio.
Desde su inicio como instalación interactiva, el proyecto ha evolucionado con la intención de convertirlo en una nueva plataforma de experimentación con videojuegos focalizados en el sonido. Estamos interesados en promover talleres en los que la interacción con el sonido sea central en el juego.