L'Oeuvre :
Que diriez-vous si votre main pouvait générer de la musique, sans toucher d'instrument ?
Que diriez-vous si la musique pouvait être vue, mais pas entendue ?
C'est "l'audiovisible", et c'est ce que fait l'oeuvre Hand in The Middle.
Hand in The Middle est un nom dérivé de Man in The Middle, dont vous avez peut-être entendu parlé à propos d'une attaque informatique où l'on intercepte et/ou modifie les communications entre 2 entités.
Vous contrôlez votre main et vos doigts, qui tout comme l'outil d'un pirate, vont générer un signal.
Le pouce génère des basses, l'indexe et le majeur sont pour les médiums et l'annulaire et l'auriculaire sont pour les aigus... mais cette musique n'est pas reproduite, elle est envoyée à un programme de générations d'effets visuels.
Ces effets (12) sont aléatoirement choisis et changés toutes les 30 secondes, alors qu'une transition entre chaque effet est calculée, ce qui donne un grand nombre (144) de combinaisons et donne un caractère captivant, amusant et très varié à ces effets dans le temps.
Physiquement cette oeuvre ressemble à un petit flipper, un objet culte des années 70 et 80, qui ne peut que rendre positivement nostalgique les gens qui les ont côtoyés.
L'oeuvre est peinte dans un marbre fluorescent, comme référence à la scène trance psychédélique, dont j'ai arpenté les soirées, en tant qu'amateur, mais aussi en tant que VJ (Video Jockey), dans les années 2000.
Détails techniques
HiTM est une oeuvre interactive qui génère des effets visuels depuis les mouvements d'une main et la hauteur de ses doigts.
L'oeuvre est composée d'un PC puissant sous Linux, d'un moniteur pro et d'un capteur LeapMotion.
Les effets visuels (open-source) sont générés avec le logiciel ProjectM. The logiciel génère les effets en temps-réel en partant d'une source audio et en lui appliquant des "présets" (des listes d'instructions et de fonctions mathématiques utilisées pour définir les effets). Le signal audio est ainsi utilisé comme un générateur de données aléatoires, représentées la plupart du temps par une analyse spectrale du signal, grandement transformée par les équations de l'effet. Tout changement dans le rythme, le volume et les fréquences peuvent donc modifier la composition et la vitesse des images générées.
Un logiciel spécifique a été créé afin de remplacer la musique habituellement utilisée par une musique générée avec le mouvement des mains et doigts. Il fonctionne ainsi :
- Si l'on éloigne ou rapproche la main du capteur, le rythme de la musique sera plus intense.
- Chaque doigt contrôle une fréquence donnée, du pouce pour les basses au petit doigt pour les aigus. Plus un doigt est bas (comme s'il appuyait sur un piano), plus le volume de la note est élevé.
Cette détection est extrêmement précise grâce au périphérique qui utilise une paire de caméras infrarouges pour détecter la position exacte des doigts et de la main dans l'espace. En fait cette technique est très similaire à ce que l’œil humain applique (stéréopsie) pour percevoir la profondeur de champs, la distance des objets qui l'entoure.
Afin d'économiser l'énergie, en cas d'inactivité, l'oeuvre entre automatiquement en veille si aucune activité n'est détectée pendant 5 minutes et elle se réveillera automatiquement si une main passe devant le capteur.
L'oeuvre fonctionne dans tous les pays où le courant alternatif est compris entre 100 et 230 Volts. Elle est fournis avec une câble au format CEE 7/7.
Dimensions : 94 cm x 46 cm x 88 cm