tut. (Universitat Autònoma de Barcelona. Departament de Ciències de la Computació)
| Títol variant: |
Interactive Performances : Sistemes d'Intel·ligència Artificial en Temps Real per el Modelatge de l'Experiència del Públic i dels Artistes |
| Títol variant: |
Interactive Performances : Sistemas de Inteligencia Artificial en Tiempo Real para el Moldelaje de la Experiencia del Público y del Artista |
| Data: |
2025 |
| Resum: |
Aquest projecte explora la integració de sistemes d'intel·ligència artificial en actuacions musicals en viu, amb l'objectiu de millorar l'experiència tant del públic com dels artistes. Es destaca com la IA pot alliberar noves dimensions creatives, permetent la generació dinàmica de sons i visuals. També s'aborden els reptes inherents a aquesta fusió, com ara les dificultats de sincronització en temps real o el manteniment de la identitat creativa de cada artista. La investigació conclou amb el desenvolupament d'un sistema personalitzat de generació immersiva de visuals basat en la densitat i la interacció del públic, utilitzant mapes de calor extrets amb models d'aprenentatge profund. S'ha realitzat una avaluació comparativa del rendiment dels models en l'estimació de densitat, demostrant la major precisió d'arquitectures avançades. Paral·lelament, s'ha desenvolupat un programari per a la composició musical interactiva amb el DJ, que tradueix els moviments en elements sonors en temps real fent servir TouchDesigner i MediaPipe. |
| Resum: |
Este proyecto explora la integración de sistemas de inteligencia artificial en actuaciones musicales en vivo, con el objetivo de mejorar la experiencia tanto del público como de los artistas. Destaca cómo la IA puede abrir nuevas dimensiones creativas, permitiendo la generación dinámica de sonidos y visuales. También se abordan los desafíos inherentes a esta fusión, como las dificultades de sincronización en tiempo real o el mantenimiento de la identidad creativa de cada artista. La investigación concluye con el desarrollo de un sistema personalizado de generación inmersiva de visuales basado en la densidad e interacción del público, utilizando mapas de calor extraídos con modelos de aprendizaje profundo. Se ha realizado una evaluación comparativa del rendimiento de los modelos en la estimación de densidad, demostrando la mayor precisión de arquitecturas avanzadas. Paralelamente, se desarrolló un software para la composición musical interactiva con el DJ, que traduce los movimientos en elementos sonoros en tiempo real utilizando TouchDesigner y MediaPipe. |
| Resum: |
This project explores the integration of artificial intelligence systems in live music performances, with the objective of improving the audience and artists' experience. It highlights how AI can unleash new creative dimensions, allowing the dynamic generation of sounds and visuals. The inherent challenges of this fusion are also addressed, such as real-time synchronization difficulties or maintaining the creative identity of each artist. The investigation ends with the development of a custom immersive visual generation system based on audience density and interaction, using heatmaps extracted with deep learning models. An evaluation comparing models' performance in density estimation was carried out, demonstrating the higher precision of advanced architectures. In parallel, a software for interactive musical composition with the DJ was developed, translating movements into real-time sound elements using TouchDesigner and MediaPipe. |
| Drets: |
Aquest document està subjecte a una llicència d'ús Creative Commons. Es permet la reproducció total o parcial, la distribució, i la comunicació pública de l'obra, sempre que no sigui amb finalitats comercials, i sempre que es reconegui l'autoria de l'obra original. No es permet la creació d'obres derivades.  |
| Llengua: |
Anglès |
| Titulació: |
Grau en Intel·ligència Artificial [2504392] |
| Pla d'estudis: |
Intel·ligència Artificial [1497] |
| Document: |
Treball final de grau ; Text |
| Matèria: |
Intel·ligència Artificial ;
Actuacions en Viu ;
Composició Sonora ;
Interacció en Temps Real ;
Experiència del Públic ;
Experiència de l'Artista ;
Interacció Persona-ordinador ;
Aprenentatge Profund ;
Mapes de Calor ;
Detecció de Mans ;
Generació de Visuals ;
Inteligencia Artificial ;
Actuaciones en Vivo ;
Composición Sonora ;
Interacción en Tiempo Real ;
Experiencia del Público ;
Experiencia del Artista ;
Interacción Humano-Computadora ;
Aprendizaje Profundo ;
Mapas de Calor ;
Detección de Manos ;
Generación de Visuale ;
Artificial Intelligence ;
Live Performances ;
Sound Composition ;
Real-Time Interaction ;
Audience Experience ;
Artist Experience ;
Human-Computer Interaction ;
Deep Learning ;
Heatmaps ;
Hand Detection ;
Visuals Generation |
visitant ::
identificació
tut. (Universitat Autònoma de Barcelona. Departament de Ciències de la Computació)
