Imagen tomada del vídeo de YouTube creado por los autores (ver más abajo).
Un sistema desarrollado por investigadores de la Universidad de Waterloo permite a las personas colaborar con grupos de robots para crear obras de arte inspiradas en la música.
La nueva tecnología presenta múltiples robots con ruedas del tamaño de una pelota de fútbol que dejan un rastro de luz de colores mientras se mueven dentro de un área fija en el piso en respuesta a características clave de la música, incluido el tempo y la progresión de acordes.
Una cámara registra los estelas de luz coordinadas que serpentean a través de esta área, que sirve como lienzo para crear una “pintura” o representación visual del contenido emocional de una pieza musical determinada.
“Básicamente, programamos un enjambre de robots para pintar basándose en estímulos musicales”, dijo el Dr. Gennaro Notomista, profesor de ingeniería eléctrica e informática en Waterloo.
“El resultado es un sistema cohesivo que no sólo procesa la entrada musical, sino que también coordina múltiples robots de pintura para crear arte adaptativo y expresivo que refleje la esencia emocional de la música que se reproduce”.
Los robots representan emociones “escuchando” música a través de los colores, la intensidad y la anchura de sus estelas de luz, así como de su posición en la pantalla y la velocidad a la que se mueven dentro de ella.
Las personas pueden influir simultáneamente en una pintura en progreso usando controles para cambiar el ancho de los senderos de luz y su ubicación en el lienzo virtual.
“Incluimos el control humano para permitir que las personas y los robots trabajen juntos”, dijo Notomista, cuyos intereses incluyen la intersección del arte y la tecnología. “El pintor humano debe complementar y ser complementado por lo que hacen los robots”.
El primer desafío para los investigadores fue desarrollar un algoritmo para controlar múltiples robots dentro de un área determinada. Probaron el sistema con hasta 12 robots, pero se puede ampliar para manejar cualquier número.
El segundo paso implicó crear tecnología para extraer y analizar características musicales que expresan emociones, de modo que puedan traducirse en estelas de luz que las representen adecuadamente.
Las lecciones aprendidas durante el proyecto tienen aplicaciones potenciales en otras áreas que requieren el control y la coordinación de múltiples robots trabajando al unísono, como el monitoreo ambiental, la agricultura de precisión, las misiones de búsqueda y rescate y la exploración planetaria.
La investigación también refleja la iniciativa Global Futures de la Universidad de Waterloo, que promueve el trabajo interdisciplinario que considera cómo las tecnologías emergentes pueden dar forma a la sociedad, la cultura y la experiencia humana.
Posteriormente, Notomista planea contratar pintores y músicos profesionales para explorar las posibilidades de la nueva herramienta en estudios de usuarios y realizar exposiciones públicas.
En la conferencia se presentó un artículo sobre el sistema, Pintura de enjambre de robots impulsada por música, de Notomist y ex estudiante graduado de Waterloo, Jingde Cheng. Conferencia internacional IEEE 2025 sobre robótica avanzada y sus impactos sociales.
Universidad de Waterloo
