Actif

Entre geste et son

Actif est un dispositif performatif questionnant doublement la relation du geste au son.
Actif est un dispositif de projection sonore interactif qui joue une composition dont les auditeurs contrôlent le déroulement par leurs gestes. Actif suit la dynamique des spectateurs : ce sont eux qui fournissent l’énergie générant la musique. Pas de mouvement, pas de musique. Actif teste l’implication du spectateur dans l’œuvre, il le provoque en le rendant indispensable à l’existence de l’œuvre.
Enfin Actif analyse la posture plus que la position. Un dispositif de vision par ordinateur calcule des descripteurs renseignant sur le geste ou la posture plutôt que seulement sur la position permettant de définir si le mouvement est rapide, énergique, saccadé ou encore répétitif.
Ces analyses permettent alors de jouer des sons d’un autre corps. Un corps sonore pré-enregistré issu des actes d’une autre personne. En interprétant les sons, on réinterprète les gestes dont ils sont issus. Ces gestes de production sonore ont été à la fois contraints par l’instrument et figés par l’enregistrement sonore alors qu’Actif est sensible à tous les gestes qu’il voit. Les contraintes ne sont pas les mêmes et tous les gestes sont possibles, mais tous n’auront pas nécessairement d’impact sur la composition.

La vidéo ci-dessous présente les premiers travaux autour de ce projet.

Actif#1:R2D2 utilise les mouvements pour générer des sons. Une transformée de Fourier inverse est appliquée à la matrice de vecteur de mouvement. Chaque colonne est spatialisée suivant sa position horizontale. Le résultat sonore suit de près l’énergie gestuelle déployée. En plaçant les aigus en haut et les graves en bas, on retrouve une gestuelle familière des chanteurs.

av.jit.iidc

Mise en ligne aujourd’hui de l’external pour Max av.jit.iidc remplaçant jit.qt.grab pour les caméras IIDC.

http://antoine.villeret.free.fr/?page_id=23

Cet external permet d’accéder de manière précise aux paramètres avancées des caméras industrielles : Format 7, haute cadence d’image, ROI…

Cet external utilise la librairie open source libdc1394 de Damien Douxchamps et n’est pour l’instant compilé que pour OS X.

La version en ligne est une version béta et nécessite l’installation manuelle du framework libdc1394. Elle a été testée sous Mac OS 10.6.2 et 10.5.8 avec Max 5.3 et les caméras AVT Guppy F033-B, Sony XCD-V60 et Apple iSight.

Le décodage des couleurs a été tester avec la iSight d’Apple et une Unibrain Fire-i.

Pour toute suggestion, rapport de bug, mécénat, envoi de bonbons, fleurs ou tomates contactez moi directement par mail : antoine [dot] villeret [at] gmail [dot] com.

IIDC dans Max5

La possibilité d’utiliser des caméras IIDC (aka. firewire) dans Max sous OS X est due au support natif de ce protocole par OS X. Dans Max, on accède à ces caméras via l’objet jit.qt.grab qui fait donc appel à Quicktime pour acquérir le flux vidéo. Il est alors très difficile de savoir comment est configuré la caméra notamment en ce qui concerne le format et le mode. Pourtant seul le choix précis de ces paramètres permet d’accéder aux modes de fonctionnement particuliers de la caméra notamment ceux donnant des cadences d’image élevé.

jit.qt.grab donne accès aux paramètres de la caméra via le protocole IIDC (brightness, sharpness, shutter, gain…). Il permet également de modifier directement les registres de la caméras avec le message iidc_csr . Mais lorsqu’on essaye de changer le mode et le format, ces paramètres entrent en conflit avec la configuration de Quicktime et l’image devient brouillée.

Le patch IIDC_inquiring disponible sur la page “Max/MSP externals/abstraction” met en avant ces défauts.

mchelper

mchelper

la première version beta publique de mon mchelper en Max5 vient d’être mise en ligne…

il s’agit d’un outil pour la configuration et le monitoring du Make Controller Kit de Making Things.

n’hésitez à me faire parvenir les problèmes/bug rencontrés.

des mises à jours, ajoutant notamment les quelques fonctions manquantes, seront faites prochainement.

Télécharger