tut. (Universitat Autònoma de Barcelona. Departament de Ciències de la Computació)
| Títol variant: |
Del Gest al Batec : Una Reinterpretació Visual de les Arts Escèniques |
| Títol variant: |
Del Gesto al Latido : Una Reinterpretación Visual de las Artes Escénicas |
| Data: |
2025 |
| Resum: |
Aquest projecte explora la intersecció entre la tecnologia i les arts escèniques mitjançant un sistema que tradueix el moviment humà en una sortida visual expressiva. Integra el reconeixement de gestos en temps real amb una interfície simbòlica 3D en forma de cor, transformant el sistema en una eina per a la narració, on el moviment transmet emoció. El desenvolupament tècnic va implicar l'avaluació de models preentrenats, l'entrenament de classificadors personalitzats, la construcció d'un flux d'interacció en temps real i la definició de funcionalitats impulsades per gestos dins d'una interfície de cor 3D personalitzada utilitzant OpenGL. Com a resultat, el sistema final associa gestos intuïtius amb metàfores visuals 3D i disseny sonor, permetent als intèrprets externalitzar l'emoció i la narrativa a través del moviment. Això es demostra en una actuació en directe basada en Bluebird de Charles Bukowski, que il·lustra com la literatura i el gest poden fusionar-se en una narració corporal. Més enllà del seu enfocament creatiu, aquest projecte contribueix a l'accessibilitat de les arts i proposa un nou llenguatge escènic basat en el ritme i l'expressió. De cara al futur, el treball podria incloure el reconeixement de gestos corporals complets, mapatges emocionals més amplis i col·laboració amb artistes per seguir enllaçant expressió creativa i desenvolupament tecnològic. |
| Resum: |
Este proyecto explora la intersección entre la tecnología y el arte escénico a través de un sistema que traduce el movimiento humano en una salida visual expresiva. Integra el reconocimiento de gestos en tiempo real con una interfaz simbólica 3D en forma de corazón, transformando el sistema en una herramienta para la narración, donde el movimiento transmite emoción. El desarrollo técnico implicó evaluar modelos preentrenados, entrenar clasificadores personalizados, construir un flujo de interacción en tiempo real y definir funcionalidades impulsadas por gestos dentro de una interfaz de corazón 3D personalizada utilizando OpenGL. Como resultado, el sistema final asigna gestos intuitivos a metáforas visuales 3D y diseño sonoro, permitiendo a los intérpretes externalizar la emoción y la narrativa a través del movimiento. Esto se demuestra en una actuación en vivo basada en Bluebird de Charles Bukowski, que ilustra cómo la literatura y el gesto pueden fusionarse en una narración corporal. Más allá de su enfoque creativo, este proyecto contribuye a la accesibilidad de las artes y propone un nuevo lenguaje escénico basado en el ritmo y la expresión. De cara al futuro, el trabajo podría incluir reconocimiento de gestos corporales completos, mapeos emocionales más amplios y colaboración con artistas para seguir uniendo expresión creativa y desarrollo tecnológico. |
| Resum: |
This project explores the intersection between technology and performance art through a system that translates human movement into expressive visual output. It integrates real-time gesture recognition with a symbolic 3D heart interface, transforming the system into a tool for storytelling, where motion conveys emotion. The technical development involved evaluating pre-trained models, training custom classifiers, building a real-time interaction pipeline, and defining gesture-driven functionalities within a custom 3D heart interface using OpenGL. As a result, the final system maps intuitive gestures to 3D visual metaphors and sound design, allowing performers to externalize emotion and narrative through movement. This is demonstrated in a live performance based on Charles Bukowski's Bluebird, which illustrates how literature and gesture can merge into embodied storytelling. Beyond its creative approach, this project contributes to the accessibility of the arts and proposes a new language of performance based on rhythm and expression. Looking forward, future work could include full body gesture recognition, broader emotional mappings, and collaboration with artists to continue bridging creative expression and technological development. |
| Drets: |
Aquest document està subjecte a una llicència d'ús Creative Commons. Es permet la reproducció total o parcial, la distribució, i la comunicació pública de l'obra, sempre que no sigui amb finalitats comercials, i sempre que es reconegui l'autoria de l'obra original. No es permet la creació d'obres derivades.  |
| Llengua: |
Anglès |
| Titulació: |
Grau en Enginyeria de Dades [2503758] |
| Pla d'estudis: |
Enginyeria de Dades [1394] |
| Document: |
Treball final de grau ; Text |
| Matèria: |
Interacció guiada per l'emoció ;
Reconeixement de gestos ;
Interacció persona-ordinador ;
Arts escèniques ;
Interacción basada en emociones ;
Reconocimiento de gestos ;
Interacción persona-ordenador ;
Artes escénicas ;
Emotion-driven interaction ;
Gesture recognition ;
Human-computer interaction ;
Performance arts |