We hebben ze allemaal gezien. Kunststof stenen. Primaire kleuren. Lukraak gestapeld op een tapijt. Ze zijn de universele afkorting voor vroege intelligentie en ongebreidelde verbeeldingskracht. Je neemt een rood blokje en legt er een blauw blok bovenop. Opeens heb je een toren. Voeg letters of vormen toe en je hebt patronen. Het is eenvoudige natuurkunde en spel.
Vervolgens leg je die blokken op een tafel.
De dynamiek verandert onmiddellijk. Een tafel is niet alleen een oppervlak. Het is een verzamelpunt. Op basisscholen vervangen ronde tafels rijen bureaus om samenwerking te forceren. Architecten verspreidden blauwdrukken over hen heen. Kunstenaars bouwen er sculpturen. Het object zelf wordt een podium voor collectieve inspanning in plaats van een eenzaam spel.
Vier afgestudeerde studenten van de Universitat Pompeu Fabra in Barcelona hebben deze logica overgenomen en er geluid aan toegevoegd. Ze wilden niet alleen speelgoed. Ze wilden een samenwerkingsinstrument. Het resultaat was het reageerbare.
Meer dan alleen een synthesizer
In de kern functioneert de reable als een muzieksynthesizer. Als je ooit naar moderne elektronische dansmuziek hebt geluisterd, zal het audioprofiel bekend aanvoelen. Diepe bas. Scherpe beats. Synthetische texturen. Maar de interface? Totaal buitenaards.
Traditionele synthesizers hebben knoppen. Ze hebben schuifregelaars. Ze hebben een hiërarchie van input die iedereen zonder muziektheoretische achtergrond kan intimideren. Het reactieve verwijdert die barrière. Het is afhankelijk van fysieke manipulatie.
Gebruikers manipuleren geluid door blokken op een grote, ronde tafel te verplaatsen. Het is tastbaar. Het is sociaal. Je draait een blok om een frequentie te veranderen. Je verplaatst het ergens anders om een maat te veranderen. Meerdere mensen kunnen tegelijkertijd aan dezelfde soundscape werken. Er is geen “verkeerde” manier om het te doen, alleen verschillende sonische resultaten.
Het visualiseren van de ruis
De ervaring is niet auditief. Het is ook diep visueel.
Het tafelblad is doorschijnend blauw. Onder of binnen dat glas pulseren en verschuiven dynamische animaties. Deze lampen zijn niet alleen decoratie. Ze benadrukken de muzikale veranderingen in realtime. Je ziet de bas wegvallen. Je ziet de melodie verschuiven.
Voor muzikanten is het een hulpmiddel. Voor toeschouwers is het theater. Het reactieve is een instrument dat evenzeer vraagt om bekeken te worden als om gehoord te worden. Het maakt van de abstracte daad van klanksynthese een zichtbare, gedeelde gebeurtenis.
De werking van het spel
Om het reageerbare te begrijpen, moeten we de manier waarop we doorgaans over computers denken, loslaten. Er zijn geen toetsenborden. Geen muizen. Alleen geometrie en zwaartekracht.
Het systeem wijst fysieke posities toe aan audioparameters.
– Rotatie regelt vaak de toonhoogte of modulatie.
– Positie op de tafel kan frequentiebanden of ruimtelijke plaatsing in de mix bepalen.
– Interactie tussen blokken kan effecten of harmonieën veroorzaken.
Deze ontwerpfilosofie overbrugt de kloof tussen nieuwsgierigheid uit de kindertijd en professionele compositie. Een architect kan een structuur schetsen op dezelfde tafel waar een componist een melodie schetst. Het medium verandert. De geest van samenwerking blijft bestaan.
Het blijkt dat het plaatsen van blokken op een tafel niet alleen maar torens bouwt. Het bouwt liedjes. En soms is de beste manier om een complexe technologie te begrijpen, deze als een speeltuin te behandelen. De resultaten kunnen verrassend luid zijn.
In de kern is het reactieve slechts een synthesizer. Het is een instrument dat is ontworpen om het tempo en de noten elektronisch te manipuleren en geluidsgolven in vormen te buigen die je niet gemakkelijk van een piano of een gitaar kunt krijgen. Draai aan een knop op een traditioneel toetsenbord terwijl je een toets ingedrukt houdt, en je kunt de toonhoogte laten wankelen. Het creëert die griezelige, aanzwellende elektronische texturen. Het reactieve doet dit ook, maar het verwijdert de verborgen mechanismen.
Vier studenten van de Universitat Pompeu Fabra in Barcelona – Sergi Jordà, Martin Kaltenbrunner, Günter Geiger en Marcos Alonso – bouwden het met een specifiek doel voor ogen. Ze wilden niet nog een solo-werkstation. Ze wilden samenwerking. De tafel is rond. Het nodigt een menigte uit. Je gaat er niet achter zitten; je staat er omheen.
De reactable is een “nieuw elektro-akoestisch muziekinstrument voor meerdere gebruikers met een tastbare gebruikersinterface op tafelblad”
Het klinkt als academisch jargon totdat je het opsplitst. Multi-user betekent dat er vier, vijf of zes mensen tegelijk kunnen staan. Elektro-akoestisch is eenvoudig genoeg: al het geluid wordt elektronisch gegenereerd. Een tastbare gebruikersinterface is de sleutel. U klikt niet met de muis en typt geen opdrachten. Je pakt fysieke blokkades op. Je verdraait ze. Je verplaatst ze. Het voelt alsof je aan de knoppen van een klassieke synth draait, alleen jij kunt de verbindingen ertussen zien.
De ontwerpfilosofie was streng. Het moest intuïtief zijn. Als je er zonder handleiding naar toe bent gelopen, mag je niet verdwalen. Pak een blok. Leg het neer. Maak een geluid. Het is zeker een uitdaging om onder de knie te krijgen. Maar de basis is toegankelijk. Zelfs een beginneling kan het er cool laten uitzien en klinken. Een doorgewinterde DJ kan urenlang de diepte verkennen.
Reageerbare objecten
Dus wat gebeurt er als je die kubussen op het oppervlak plaatst? En hoe onderscheid je het een van het ander?
Het systeem vertrouwt op visuele feedback en fysieke logica. Elk blok vertegenwoordigt een specifieke functie in de audioketen. Er zijn modules voor oscillatoren (geluid genereren), filters (toonvorming) en effecten (textuur toevoegen). Wanneer je twee blokken dicht bij elkaar plaatst, licht er een verbindingslijn op het tafelblad op. Het systeem herkent de nabijheid en creëert een signaalpad ertussen.
Deze tastbare interface verandert de manier waarop muzikanten over compositie denken. Je hoort niet alleen het resultaat; je ziet de structuur. Als u een filterblok dichter bij een oscillator plaatst, is de relatie expliciet. Het is ruimtelijk. Het is collaboratief.
Van musea tot het podium van Björk
Jarenlang leefde het reactieve in de wereld van technische demo’s. Het won de Ars Electronica Gouden Nica. In 2007 werd er de Premi de la Cuitat de Barcelona voor gehouden. Het was een wonder van techniek en design, getoond in musea en op festivals. Maar het bleef een curiosum.
Toen zag Björk het.
De IJslandse muzikant bekeek een YouTube-video van het apparaat. Ze zag niet alleen een cool speeltje; ze zag een rekwisiet die bij haar artistieke visie paste. Ze huurde het team in om een toerversie te bouwen. Ze had een DJ meegenomen die het kon draaien tijdens haar “Volta”-tour. Plotseling was het reactieve niet alleen een onderzoeksproject. Het maakte deel uit van een mondiaal popspektakel.
Het visuele element werd centraal. De gloeiende verbindingen, de fysieke manipulatie van geluid: het voegde een prestatieniveau toe waar een laptop of een rek met synths niet aan kon tippen. Het publiek kon zien welke muziek er werd gemaakt. Ze konden oorzaak en gevolg zien.
Deze blootstelling veranderde alles. Het bewees dat complexe technologie toegankelijk en zelfs theatraal kon worden gemaakt. Het reactieve materiaal verhuisde van het laboratorium naar de arena. Het toonde aan dat tastbare interfaces niet alleen voor ingenieurs waren. Ze waren voor artiesten. Ze waren voor mensen die de muziek wilden aanraken.
Waarom het er nu toe doet
We zijn de aanvankelijke hype voorbij. Maar de principes blijven relevant. De reactable toonde aan dat directe manipulatie van digitale interfaces aantrekkelijker zou kunnen zijn dan abstracte menu’s. Het toonde aan dat samenwerking in de hardware kon worden ingebouwd.
Tegenwoordig zien we echo’s hiervan in andere instrumenten. Sommigen gebruiken gebarenbediening. Anderen gebruiken touchscreens. Maar het reactieve was een van de eersten die erin slaagde het onzichtbare zichtbaar te maken. Het maakte het signaalpad tot een fysiek iets dat je kon aanraken.
Het gaat niet alleen om het maken van lawaai. Het gaat erom het proces van het duidelijk maken van ruis helder te maken. Transparant. Gedeeld.
De blokken liggen nog steeds op tafel. De lichten gloeien nog steeds. Maar de echte verandering zit in de manier waarop we interactie begrijpen. We voeren niet alleen meer gegevens in. Wij manipuleren de ruimte. Met onze handen vormen we geluid. En wij kunnen het samen doen.
Er is een verschil tussen het zien van een golfvorm op een scherm en het kijken naar een lichtlijn die twee kubussen met elkaar verbindt. Eén daarvan is informatie. De andere is een ervaring. De reaguurders kozen voor het laatste. Het koos ervoor om gevoeld te worden, niet alleen om gehoord te worden.
Het aanraken van een blok tegen de tafel is alsof je op play drukt in een lus. Maar sla één vierkant neer en je hebt alleen maar het oppervlak bekrast. De magie gebeurt in de geometrie. Waar je deze vormen ten opzichte van elkaar plaatst, bepaalt het geluid.
Er zijn zes verschillende bloktypen. Elk heeft een uniek silhouet en een specifieke sonische taak. Haal ze door elkaar en de muziek valt uit elkaar.
De geluidsgeneratoren
Begin met de vierkanten. Ze maken lawaai. Draai er één en je verschuift de frequentie. Sleep uw vinger langs de geanimeerde ring om de amplitude omhoog of omlaag te draaien. Het is alsof je aan de volumeknop van een oude televisie draait.
Wil je het stilleggen? Maak een knipgebaar over de lijn die het blok met het midden van de tafel verbindt. Het onderbreekt het signaal. Raak de ring nogmaals aan om hem terug te brengen. Eenvoudig.
Filters en controllers
Vervolgens komen de vierkanten met afgeronde randen. Dit zijn geluidsfilters. Het zijn de gitaarpedalen van de reactable. Voeg flange, fuzz of feedback toe. Sluit een stabiele sinusgolf aan op een filter en zie hoe deze vervormt tot iets grilligs en interessants.
Dan zijn er de cirkels. Controleurs. Ze sturen gegevens naar buren. Beweeg een controller in de buurt van een generator en je verandert de frequentie ervan. Je kunt een zuivere, vloeiende klank krijgen of deze vervormen tot een wah-wah-effect.
Complexe geometrie
De achthoeken en vijfhoeken zijn waar het harig wordt.
Controlefilters (achtzijdig) en audiomixers (vijfzijdig) zorgen voor het zware werk. Ze fungeren als monsternemers. Je laat niet zomaar een toon horen; je bouwt ingewikkelde melodische lijnen. Ze harmoniseren. Ze schakelen de sleutel om. Ze veranderen van vorm.
Mondiale controle
Hemisferische blokken zijn Globale objecten. Ze creëren een cirkelvormig veld. Alles binnen dat veld wordt beïnvloed. Meestal fungeren ze als metronoom. Ze houden het tempo erin. Of ze fungeren als tonalizer en corrigeren de toonhoogtedrift van generatoren en filters.
De hardware is gewoon plastic en sensoren. De software doet het zware werk. Het vertaalt geometrie naar audio. Concreet maakt het gebruik van reacTIVision.
Hoe de reacTIVision Engine fysieke blokkades opspoort
Je kunt het niet zien, maar iets houdt elke beweging op tafel in de gaten. Onder het doorschijnende oppervlak brengt een verborgen computervisiesysteem de fysieke wereld in digitale gegevens in kaart. De opstelling is eenvoudig maar effectief: een camera en een projector weggestopt onder het hout. Ze wijzen allebei naar boven, maar doen totaal verschillende taken.
De camera zijn de ogen. Het draait op reacTIVision, een gespecialiseerde vision-engine ontworpen voor op tabellen gebaseerde interactie. Hij ziet niet alleen klodders plastic. Het analyseert specifieke gegevenspunten in realtime. Welke kant van een blok is naar beneden gericht? Waar is het ten opzichte van het midden van de tafel? Hoe ver is het van een ander blok? Het volgt ook de rotatie. Als je een stuk om zijn eigen as draait, weet het systeem dat. Elke tastbare aanpassing die u aanbrengt, verandert de toonhoogte, filters of effecten, en reacTIVision vangt deze veranderingen onmiddellijk op.
Van beweging naar geluid en licht
Dus wat gebeurt er nadat de camera de blokken ziet? De gegevens gaan naar een verbindingsbeheerder. Dit is waar de magie zich in twee paden splitst.
Eerst gaat de informatie naar een audiosynthesizer. De synth interpreteert de blokposities als muzikale instructies. Het genereert het geluid en pompt het naar de luidsprekers. Dit is de muziek die de spelers maken.
Ten tweede gaan diezelfde gegevens naar de projector. In tegenstelling tot de camera, die observeert, creëert de projector. Het schijnt licht door het blauwe, doorschijnende tafelblad. Het schildert animaties rechtstreeks op het oppervlak. Deze beelden geven onmiddellijke feedback. Spelers zien wat ze spelen. Toeschouwers zien de logica achter het geluid. Het sluit de cirkel tussen actie en reactie.
Ik zie het in actie
De studenten en onderzoekers die het reactieve materiaal hebben gebouwd, bewaren het niet in een laboratorium. Ze nemen het mee op pad. Je zult het zien op muziekfestivals, technische conferenties en musea. Als je getuige wilt zijn van een live optreden, kijk dan op de officiële reactieve website voor aankomende optredens.
Er zijn plannen om het toestel commercieel te verkopen, maar er is nog geen prijs bekendgemaakt. Als je niet kunt wachten of geen kaartjes kunt krijgen, is Björk de beste keuze. Ze gebruikte de synthesizer beroemd op tournee. Als ze het naar jouw stad brengt, vang haar dan terwijl ze nog steeds een voorkeur heeft voor het instrument.
Voor meer informatie over de technologie achter deze instrumenten kunt u de onderstaande bronnen raadplegen.
Veel meer informatie
Gerelateerde HowStuffWorks-artikelen
- Hoe oscillatoren werken
- Hoe MIDI werkt
- Hoe concertreizen werken
- Hoe muziekmixsoftware werkt
- Hoe bandapparatuur werkt
- Hoe elektrische gitaren werken
Nog meer geweldige links
- De reactieve startpagina
Bronnen
- Andrews, Robert. “ReacTable tactiele synth trekt de aandacht en het oor van Björk.” Bedraad. 9 augustus 2007.
- OREN: ElectroAcoustic Resource Site. “Elektro-akoestische muziek.”
- Jordà, Sergi, Günter Geiger, Marcos Alonso en Martin Kaltenbrunner. “De reacTable: onderzoek naar de synergie tussen live muziekoptredens en tastbare interfaces op tafelblad.” Muziektechnologiegroep, Pompeu Fabra Universiteit. 2007.
- Jordà, Sergi, Günter Geiger, Marcos Alonso en Martin Kaltenbrunner. “De reacTable: een collaboratief muziekinstrument.” Muziektechnologiegroep, Pompeu Fabra Universiteit. 2006.
- Kaltenbrunner, Martin en Ross Benica. “reacTIVision: een computervisieframework voor op tabellen gebaseerde tastbare interactie.” Muziektechnologiegroep, Pompeu Fabra Universiteit. 2007.
