
HIPERACUSIA |
RIO BRAVO
Live Cinema
Coding
Sistema Nacional de Creadores de Arte

Composiciones audiovisuales con procesos generativos digitales e interacción de autor basada en programación en vivo
Resumen del concierto audiovisual presentado en la Biblioteca Vascincelos, en el marco de la serie de actos multimedia en vivo Circuit in Trance, curado por Edmar Soria, con el apoyo adicional de la UAM (Universidad Autónoma de México)
colaboración con Malitzin Cortés


Imagen generada con IA que explora la práctica de cruzar el rio con una cuerda atada a ambos lados de la fromntera para enfrentar la fuerte corriente del rio Bravo
Serie de imágenes generadas con IA que exploran planos cinematográficos subacuáticos de los pasos de los migrantes al cruzar el rio en zonas poco profundas.
Mediante LLM (Large Language Model) y plataformas de Inteligencia Artificial como Midjourney y Runway, enfocadas mayormente por la generación de imagen la primera y para la generación de video la segunda, se crearon escenas para soportar los momentos previstos para el acto audiovisual.
Los procesos generativos a partir de lenguaje natural permitieron explorar planos suigéneris, como puntos de vistas subacuáticos de migrantes cruzando el rio, o vistas de documentos extraviados y protegidos del agua en bolsas de plástico, estas y otras escenas visuales derivaron de la escritura o Prompts; estos a su vez provienen de las anécdotas documentadas de migrantes.


Serie de imágenes generadas con IA que exploran planos cinematográficos desde el punto de vista de la guardia fronteriza estadounidense.
Serie de imágenes generadas con IA que exploran planos cinematográficos de migrantes al cruzar el rio vistos por otros migrantes, esta es la referencia fotográfica mas recurrente


Imagen generada con IA que explora el miedo a perder o dañar sus documentos al pasar por el rio, o documentos encontrados de migrantes que no lograron cruzar
Imagen generada con IA que explora el miedo a perder o dañar sus documentos al pasar por el rio, o documentos encontrados de migrantes que no lograron cruzar


Codigo de Tidal Cycles con nuevas funciones para las necesidades audiovisuales del proyecto
A la izquierda de esta imagen, visual que se manipula; a la derecha de la imagen, código de Tidal Cycles que al ser ejecutado manipula la expresión visual en sincronía con la expresividad sonora
Para el proyecto se desarrollaron módulos de JavaScript para la manipulación visual en el navegador web, y funciones de Haskell para TidalCycles * que expanden esta herramienta de Live Coding para la manipulación visual o de video.
Esta librería de funciones y clases permiten procesos simétricos, ósea de visualización sonora, o de sonificación visual con la finalidad de lograr una expresión audiovisual sinestésica.

Ejemplo de algoritmo musical, este rige la secuencia visual a partir de los ciclos sonoros, acelerando la velocidad del video cada vez que se escucha el instrumento “sonido:0”