Comment le Reactable transforme les blocs de table en musique électronique

13

Nous les avons tous vus. Briques en plastique. Couleurs primaires. Empilés au hasard sur un tapis. Ils sont le raccourci universel d’une intelligence précoce et d’une imagination débridée. Vous prenez un bloc rouge, vous en placez un bleu dessus. Soudain, vous avez une tour. Ajoutez des lettres ou des formes et vous obtenez des motifs. C’est simple, de la physique et du jeu.

Ensuite, vous posez ces blocs sur une table.

La dynamique change instantanément. Une table n’est pas seulement une surface. C’est un point de rassemblement. Dans les écoles primaires, des tables rondes remplacent les rangées de bureaux pour forcer la collaboration. Les architectes y ont diffusé des plans. Les artistes y construisent des sculptures. L’objet lui-même devient une scène d’effort collectif plutôt que de jeu solitaire.

Quatre étudiants diplômés de l’Universitat Pompeu Fabra de Barcelone ont repris cette logique et y ont ajouté du son. Ils ne voulaient pas seulement un jouet. Ils voulaient un instrument collaboratif. Le résultat était le réactif.

Plus qu’un simple synthétiseur

À la base, le réactif fonctionne comme un synthétiseur musical. Si vous avez déjà écouté de la musique de danse électronique moderne, le profil audio vous semblera familier. Des basses profondes. Des battements aigus. Textures synthétiques. Mais l’interface ? Totalement extraterrestre.

Les synthétiseurs traditionnels ont des boutons. Ils ont des curseurs. Ils ont une hiérarchie d’entrées qui peuvent intimider n’importe qui sans formation en solfège. Le réactif supprime cette barrière. Cela repose sur la manipulation physique.

Les utilisateurs manipulent le son en déplaçant des blocs sur une grande table circulaire. C’est tactile. C’est social. Vous faites pivoter un bloc pour changer une fréquence. Vous le déplacez ailleurs pour modifier un rythme. Plusieurs personnes peuvent travailler simultanément sur une même ambiance sonore. Il n’y a pas de « mauvaise » façon de procéder, seulement des résultats sonores différents.

Visualiser le bruit

L’expérience n’est pas auditive. C’est aussi profondément visuel.

La surface de la table est bleue translucide. Sous ou dans ce verre, des animations dynamiques pulsent et se déplacent. Ces lumières ne sont pas seulement une décoration. Ils mettent en évidence les changements musicaux en temps réel. Vous voyez les basses baisser. Vous voyez le changement de mélodie.

Pour les musiciens, c’est un outil. Pour les spectateurs, c’est du théâtre. Le réactif est un instrument qui demande à être observé autant qu’à être entendu. Il transforme l’acte abstrait de synthèse sonore en un événement visible et partagé.

Les mécanismes du jeu

Comprendre le réactif nécessite d’abandonner la façon dont nous pensons habituellement aux ordinateurs. Il n’y a pas de claviers. Pas de souris. Juste de la géométrie et de la gravité.

Le système mappe les positions physiques aux paramètres audio.
Rotation contrôle souvent la hauteur ou la modulation.
– La Position sur la table peut dicter les bandes de fréquences ou le placement spatial dans le mix.
L’interaction entre les blocs peut déclencher des effets ou des harmonies.

Cette philosophie de conception comble le fossé entre la curiosité de l’enfance et la composition professionnelle. Un architecte peut dessiner une structure sur la même table où un compositeur dessine une mélodie. Le médium change. L’esprit collaboratif demeure.

Il s’avère que poser des blocs sur une table ne permet pas seulement de construire des tours. Cela construit des chansons. Et parfois, la meilleure façon de comprendre une technologie complexe est de la traiter comme un terrain de jeu. Les résultats peuvent être étonnamment bruyants.

À la base, le réactif n’est qu’un synthétiseur. Il s’agit d’un instrument conçu pour manipuler électroniquement le tempo et les notes, en pliant les ondes sonores dans des formes que vous ne pouvez pas facilement obtenir avec un piano ou une guitare. Tournez un bouton sur un clavier traditionnel tout en maintenant une touche enfoncée et vous pouvez faire osciller la hauteur. Cela crée ces textures électroniques étranges et gonflées. Le réactif fait cela aussi, mais il supprime les mécanismes cachés.

Quatre étudiants de l’Université Pompeu Fabra de Barcelone – Sergi Jordà, Martin Kaltenbrunner, Günter Geiger et Marcos Alonso – l’ont construit avec un objectif précis en tête. Ils ne voulaient pas d’un autre poste de travail solo. Ils voulaient une collaboration. La table est ronde. Cela invite une foule. Vous ne vous asseyez pas derrière ; vous vous tenez autour.

Le réactif est un « nouvel instrument de musique électro-acoustique multi-utilisateurs doté d’une interface utilisateur tangible sur table »

Cela ressemble à du jargon académique jusqu’à ce que vous le décomposiez. Multi-utilisateurs signifie que quatre, cinq ou six personnes peuvent se tenir là à la fois. L’électro-acoustique est assez simple : tout le son est généré électroniquement. Une interface utilisateur tangible est la clé. Vous ne cliquez pas sur une souris ou ne tapez pas de commandes. Vous saisissez des blocs physiques. Vous les tordez. Vous les déplacez. C’est comme tourner les boutons d’un synthé classique, vous seul pouvez voir les connexions entre eux.

La philosophie de conception était stricte. Il fallait que ce soit intuitif. Si vous y êtes allé sans manuel, vous ne devriez pas être perdu. Ramassez un bloc. Posez-le. Faites un son. C’est difficile à maîtriser, bien sûr. Mais les bases sont accessibles. Même un novice peut lui donner une apparence et un son cool. Un DJ chevronné peut passer des heures à en explorer les profondeurs.

Objets réactifs

Alors que se passe-t-il lorsque vous placez ces cubes sur la surface ? Et comment distinguer les uns des autres ?

Le système repose sur un retour visuel et une logique physique. Chaque bloc représente une fonction spécifique dans la chaîne audio. Il existe des modules pour les oscillateurs (génération de son), les filtres (façonnage du son) et les effets (ajout de texture). Lorsque vous placez deux blocs proches l’un de l’autre, une ligne de connexion s’éclaire sur la surface de la table. Le système reconnaît la proximité et crée un chemin de signal entre eux.

Cette interface tangible change la façon dont les musiciens envisagent la composition. Vous n’entendez pas seulement le résultat ; vous voyez la structure. Si vous rapprochez un bloc de filtre d’un oscillateur, la relation est explicite. C’est spatial. C’est collaboratif.

Des musées à la scène de Björk

Pendant des années, les réactifs ont vécu dans le monde des démos technologiques. Il a remporté le Ars Electronica Golden Nica. Il a remporté le Premi de la Cuitat de Barcelona en 2007. C’était une merveille d’ingénierie et de design, exposée dans les musées et les festivals. Mais cela restait une curiosité.

Puis Björk l’a vu.

Le musicien islandais a regardé une vidéo YouTube de l’appareil. Elle n’a pas seulement vu un jouet sympa ; elle a vu un accessoire de scène qui correspondait à sa vision artistique. Elle a embauché l’équipe pour construire une version de tournée. Elle a amené un DJ qui pourrait le jouer lors de sa tournée “Volta”. Soudain, le réactif n’était plus seulement un projet de recherche. Cela faisait partie d’un spectacle pop mondial.

L’élément visuel est devenu central. Les connexions lumineuses, la manipulation physique du son – cela ajoutait une couche de performance qu’un ordinateur portable ou un rack de synthés ne pouvait égaler. Le public pouvait voir la musique créée. Ils pouvaient voir la cause et l’effet.

Cette exposition a tout changé. Cela a prouvé qu’une technologie complexe pouvait être rendue accessible, même en théâtre. Le réactif est passé du laboratoire à l’arène. Cela a montré que les interfaces tangibles n’étaient pas réservées aux ingénieurs. Ils étaient destinés aux artistes. Ils étaient destinés aux gens qui voulaient toucher à la musique.

Pourquoi c’est important maintenant

Nous avons dépassé le battage médiatique initial. Mais les principes restent pertinents. Le réactif a démontré que la manipulation directe des interfaces numériques pouvait être plus attrayante que les menus abstraits. Cela a montré que la collaboration pouvait être intégrée au matériel.

Aujourd’hui, nous en voyons des échos dans d’autres instruments. Certains utilisent le contrôle gestuel. D’autres utilisent des écrans tactiles. Mais le réactif fut l’un des premiers à réussir à rendre visible l’invisible. Cela faisait du chemin du signal une chose physique que vous pouviez toucher.

Il ne s’agit pas seulement de faire du bruit. Il s’agit de rendre clair le processus de rendu du bruit. Transparent. Commun.

Les blocs sont toujours sur la table. Les lumières brillent toujours. Mais le véritable changement réside dans la façon dont nous comprenons l’interaction. Nous ne nous contentons plus de saisir des données. Nous manipulons l’espace. Nous façonnons le son avec nos mains. Et nous pouvons le faire ensemble.

Il y a une différence entre voir une forme d’onde sur un écran et regarder une ligne de lumière relier deux cubes. L’un est l’information. L’autre est une expérience. Le réactif a choisi cette dernière. Il a choisi d’être ressenti, pas seulement entendu.

Toucher un bloc sur la table, c’est comme jouer en boucle. Mais si vous abattez une seule case, vous n’aurez qu’effleuré la surface. La magie opère dans la géométrie. L’endroit où vous placez ces formes les unes par rapport aux autres dicte le son.

Il existe six types de blocs distincts. Chacun a une silhouette unique et un travail sonore spécifique. Mélangez-les et la musique s’effondre.

Les générateurs de sons

Commencez par les carrés. Ils font du bruit. Faites-en une rotation et vous changez la fréquence. Faites glisser votre doigt le long de son anneau animé pour augmenter ou diminuer l’amplitude. C’est comme tourner le bouton de volume d’un vieux téléviseur à tube.

Vous voulez le faire taire ? Faites un geste coupant sur la ligne reliant le bloc au centre de la table. Cela coupe le signal. Touchez à nouveau l’anneau pour le ramener. Simple.

Filtres et contrôleurs

Viennent ensuite les carrés aux bords arrondis. Ce sont des filtres sonores. Ce sont les pédales de guitare du Reactable. Ajoutez du flange, du fuzz ou du feedback. Branchez une onde sinusoïdale constante dans un filtre et regardez-la se déformer en quelque chose d’irrégulier et d’intéressant.

Ensuite, il y a les cercles. Contrôleurs. Ils envoient des données aux voisins. Déplacez un contrôleur près d’un générateur et vous modifiez sa fréquence. Vous pouvez obtenir un son clair et fluide ou le transformer en un effet wah-wah.

Géométrie complexe

Les octogones et les pentagones sont là où ça devient poilu.

Les filtres de contrôle (à huit côtés) et les mélangeurs audio (à cinq côtés) gèrent le gros du travail. Ils agissent comme des échantillonneurs. Vous ne faites pas simplement boucler une tonalité ; vous construisez des lignes mélodiques complexes. Ils s’harmonisent. Ils changent de clé. Ils changent de forme.

Contrôle global

Les blocs hémisphériques sont des objets globaux. Ils créent un champ circulaire. Tout ce qui se trouve à l’intérieur de ce champ est affecté. Habituellement, ils agissent comme un métronome. Ils gardent le tempo. Ou bien ils fonctionnent comme un tonaliseur, corrigeant la dérive de hauteur des générateurs et des filtres.

Le matériel n’est que du plastique et des capteurs. Le logiciel fait le gros du travail. Il traduit la géométrie en audio. Plus précisément, il utilise reacTIVision.

Comment le moteur reacTIVision suit les blocs physiques

Vous ne pouvez pas le voir, mais quelque chose observe chacun de vos mouvements sur la table. Sous la surface translucide, un système de vision par ordinateur caché cartographie le monde physique en données numériques. L’installation est simple mais efficace : une caméra et un projecteur cachés sous le bois. Ils pointent tous les deux vers le haut, mais ils accomplissent des tâches complètement différentes.

La caméra, ce sont les yeux. Il fonctionne sur reacTIVision, un moteur de vision spécialisé conçu pour l’interaction basée sur des tables. Il ne voit pas seulement des gouttes de plastique. Il analyse des points de données spécifiques en temps réel. Quel côté d’un bloc est orienté vers le bas ? Où est-il par rapport au centre de la table ? À quelle distance se trouve-t-il d’un autre bloc ? Il suit également la rotation. Si vous faites tourner une pièce autour de son propre axe, le système le sait. Chaque ajustement tangible que vous effectuez modifie la hauteur, les filtres ou les effets, et reacTIVision détecte instantanément ces changements.

Du mouvement au son et à la lumière

Alors, que se passe-t-il une fois que la caméra a vu les blocs ? Les données vont vers un gestionnaire de connexions. C’est là que la magie se divise en deux chemins.

Tout d’abord, les informations sont dirigées vers un synthétiseur audio. Le synthé interprète les positions des blocs comme des instructions musicales. Il génère le son et le transmet aux haut-parleurs. C’est la musique que les joueurs créent.

Deuxièmement, ces mêmes données sont transmises au projecteur. Contrairement à la caméra qui observe, le projecteur crée. Il brille à travers le plateau bleu translucide. Il peint des animations directement sur la surface. Ces visuels fournissent un retour immédiat. Les joueurs voient à quoi ils jouent. Les spectateurs voient la logique derrière ce bruit. Il ferme la boucle entre l’action et la réaction.

Le voir en action

Les étudiants et les chercheurs qui ont construit le réactif ne le conservent pas dans un laboratoire. Ils le prennent sur la route. Vous le verrez dans les festivals de musique, les conférences techniques et les musées. Si vous souhaitez assister à une performance en direct, consultez le site Web officiel réactif pour les apparitions à venir.

Il est prévu de vendre l’appareil dans le commerce, même si aucun prix n’a encore été annoncé. Si vous ne pouvez pas attendre ou ne pouvez pas obtenir de billets, Björk est votre prochain meilleur choix. Elle a utilisé le synthétiseur en tournée. Si elle l’apporte dans votre ville, attrapez-la pendant qu’elle privilégie toujours l’instrument.

Pour en savoir plus sur la technologie derrière ces instruments, consultez les ressources ci-dessous.

Beaucoup plus d’informations

Articles connexes sur HowStuffWorks

  • Comment fonctionnent les oscillateurs
  • Comment fonctionne le MIDI
  • Comment fonctionnent les tournées de concerts
  • Comment fonctionne le logiciel de mixage musical
  • Comment fonctionne l’équipement de bande
  • Comment fonctionnent les guitares électriques

Plus de liens intéressants

  • La page d’accueil réactive

Sources

-Andrews, Robert. “Le synthétiseur tactile ReacTable attire l’œil et l’oreille de Björk.” Filaire. 9 août 2007.
– EARS : Site de ressources électroacoustiques. “Musique électroacoustique.”
– Jordà, Sergi, Günter Geiger, Marcos Alonso et Martin Kaltenbrunner. “Le reacTable : explorer la synergie entre la performance musicale en direct et les interfaces tangibles sur table.” Groupe de technologie musicale, Université Pompeu Fabra. 2007.
– Jordà, Sergi, Günter Geiger, Marcos Alonso et Martin Kaltenbrunner. “Le reacTable : un instrument de musique collaboratif.” Groupe de technologie musicale, Université Pompeu Fabra. 2006.
– Kaltenbrunner, Martin et Ross Benica. “reacTIVision : un cadre de vision par ordinateur pour une interaction tangible basée sur des tables.” Groupe de technologie musicale, Université Pompeu Fabra. 2007.