Entre geste et son

Actif est un dispositif performatif questionnant doublement la relation du geste au son.
Actif est un dispositif de projection sonore interactif qui joue une composition dont les auditeurs contrôlent le déroulement par leurs gestes. Actif suit la dynamique des spectateurs : ce sont eux qui fournissent l’énergie générant la musique. Pas de mouvement, pas de musique. Actif teste l’implication du spectateur dans l’œuvre, il le provoque en le rendant indispensable à l’existence de l’œuvre.
Enfin Actif analyse la posture plus que la position. Un dispositif de vision par ordinateur calcule des descripteurs renseignant sur le geste ou la posture plutôt que seulement sur la position permettant de définir si le mouvement est rapide, énergique, saccadé ou encore répétitif.
Ces analyses permettent alors de jouer des sons d’un autre corps. Un corps sonore pré-enregistré issu des actes d’une autre personne. En interprétant les sons, on réinterprète les gestes dont ils sont issus. Ces gestes de production sonore ont été à la fois contraints par l’instrument et figés par l’enregistrement sonore alors qu’Actif est sensible à tous les gestes qu’il voit. Les contraintes ne sont pas les mêmes et tous les gestes sont possibles, mais tous n’auront pas nécessairement d’impact sur la composition.

La vidéo ci-dessous présente les premiers travaux autour de ce projet.

Actif#1:R2D2 utilise les mouvements pour générer des sons. Une transformée de Fourier inverse est appliquée à la matrice de vecteur de mouvement. Chaque colonne est spatialisée suivant sa position horizontale. Le résultat sonore suit de près l’énergie gestuelle déployée. En plaçant les aigus en haut et les graves en bas, on retrouve une gestuelle familière des chanteurs.