Come il Reactable trasforma i blocchi da tavolo in musica elettronica

18

Li abbiamo visti tutti. Mattoni di plastica. Colori primari. Impilati a casaccio su un tappeto. Sono l’abbreviazione universale per intelligenza precoce e immaginazione sfrenata. Prendi un blocco rosso e ne metti uno blu sopra. All’improvviso hai una torre. Aggiungi lettere o forme e avrai dei modelli. È semplice fisica e gioco.

Poi metti quei blocchi su un tavolo.

La dinamica cambia istantaneamente. Un tavolo non è solo una superficie. È un punto di ritrovo. Nelle scuole elementari, i tavoli rotondi sostituiscono le file di banchi per forzare la collaborazione. Gli architetti diffondono progetti su di loro. Gli artisti costruiscono sculture lì. L’oggetto stesso diventa un palcoscenico per uno sforzo collettivo piuttosto che per un gioco solitario.

Quattro studenti laureati dell’Universitat Pompeu Fabra di Barcellona hanno preso questa logica e vi hanno aggiunto valore. Non volevano solo un giocattolo. Volevano uno strumento collaborativo. Il risultato è stato il reagibile.

Molto più di un semplice sintetizzatore

Fondamentalmente, il reattivo funziona come un sintetizzatore musicale. Se hai mai ascoltato musica dance elettronica moderna, il profilo audio ti sembrerà familiare. Bassi profondi. Battiti taglienti. Texture sintetiche. Ma l’interfaccia? Totalmente alieno.

I sintetizzatori tradizionali hanno manopole. Hanno dei cursori. Hanno una gerarchia di input che può intimidire chiunque senza un background di teoria musicale. Il reattivo rimuove quella barriera. Si basa sulla manipolazione fisica.

Gli utenti manipolano il suono spostando i blocchi su un grande tavolo circolare. È tattile. È sociale. Ruoti un blocco per cambiare una frequenza. Lo sposti altrove per alterare un ritmo. Più persone possono lavorare contemporaneamente sullo stesso paesaggio sonoro. Non esiste un modo “sbagliato” per farlo, solo risultati sonori diversi.

Visualizzare il rumore

L’esperienza non è uditiva. È anche profondamente visivo.

La superficie del tavolo è blu traslucido. Sotto o all’interno del vetro, le animazioni dinamiche pulsano e si spostano. Queste luci non sono solo decorazioni. Evidenziano i cambiamenti musicali in tempo reale. Vedi il calo dei bassi. Vedi lo spostamento della melodia.

Per i musicisti è uno strumento. Per gli spettatori è teatro. Il reagibile è uno strumento che chiede di essere osservato tanto quanto di essere ascoltato. Trasforma l’atto astratto della sintesi sonora in un evento visibile e condiviso.

I meccanismi del gioco

Per comprendere ciò che è reagibile è necessario abbandonare il modo in cui di solito pensiamo ai computer. Non ci sono tastiere. Niente topi. Solo geometria e gravità.

Il sistema mappa le posizioni fisiche sui parametri audio.
– La Rotazione spesso controlla l’intonazione o la modulazione.
– La Posizione sul tavolo può dettare le bande di frequenza o il posizionamento spaziale nel mix.
– L’Interazione tra i blocchi può attivare effetti o armonie.

Questa filosofia progettuale colma il divario tra la curiosità infantile e la composizione professionale. Un architetto può abbozzare una struttura sullo stesso tavolo dove un compositore abbozza una melodia. Il mezzo cambia. Lo spirito collaborativo resta.

Si scopre che mettendo i blocchi su un tavolo non si costruiscono solo torri. Costruisce canzoni. E a volte, il modo migliore per comprendere una tecnologia complessa è trattarla come un parco giochi. I risultati possono essere sorprendentemente forti.

Fondamentalmente, il reattivo è solo un sintetizzatore. È uno strumento progettato per manipolare elettronicamente il tempo e le note, piegando le onde sonore in forme che non puoi facilmente ottenere da un pianoforte o da una chitarra. Ruota una manopola su una tastiera tradizionale mentre tieni premuto un tasto e puoi far vacillare il tono. Crea quelle trame elettroniche inquietanti e gonfie. Anche il reattivo fa lo stesso, ma rimuove i meccanismi nascosti.

Quattro studenti dell’Universitat Pompeu Fabra di Barcellona – Sergi Jordà, Martin Kaltenbrunner, Günter Geiger e Marcos Alonso – lo hanno costruito con un obiettivo specifico in mente. Non volevano un’altra postazione di lavoro solista. Volevano collaborazione. Il tavolo è rotondo. Invita una folla. Non ti siedi dietro; tu stai lì intorno.

Il reactable è un “nuovo strumento musicale elettroacustico multiutente con un’interfaccia utente tangibile da tavolo”

Sembra un gergo accademico finché non lo scomponi. Multiutente significa che quattro, cinque o sei persone possono stare lì contemporaneamente. L’elettroacustica è abbastanza semplice: tutto il suono è generato elettronicamente. L’interfaccia utente tangibile è la chiave. Non stai facendo clic con il mouse o digitando comandi. Stai afferrando blocchi fisici. Li giri. Li sposti. Sembra di girare le manopole di un sintetizzatore classico, solo tu puoi vedere le connessioni tra loro.

La filosofia progettuale era rigorosa. Doveva essere intuitivo. Se ti avvicini senza un manuale, non dovresti perderti. Prendi un blocco. Mettilo giù. Emetti un suono. È difficile da padroneggiare, certo. Ma le basi sono accessibili. Anche un principiante può farlo sembrare interessante. Un DJ esperto può trascorrere ore ad esplorarne la profondità.

Oggetti reattivi

Allora cosa succede quando metti quei cubi sulla superficie? E come distinguere l’uno dall’altro?

Il sistema si basa sul feedback visivo e sulla logica fisica. Ogni blocco rappresenta una funzione specifica nella catena audio. Ci sono moduli per oscillatori (generazione del suono), filtri (modellamento del tono) ed effetti (aggiunta di texture). Quando avvicini due blocchi, sulla superficie del tavolo si illumina una linea di collegamento. Il sistema riconosce la vicinanza e crea un percorso di segnale tra di loro.

Questa interfaccia tangibile cambia il modo in cui i musicisti pensano alla composizione. Non stai solo ascoltando il risultato; stai vedendo la struttura. Se sposti un blocco filtro più vicino a un oscillatore, la relazione è esplicita. È spaziale. È collaborativo.

Dai musei al palco di Björk

Per anni, i reattivi hanno vissuto nel mondo delle demo tecnologiche. Ha vinto l’Ars Electronica Golden Nica. Ha vinto il Premi de la Cuitat de Barcelona nel 2007. Era una meraviglia di ingegneria e design, esposta in musei e festival. Ma è rimasta una curiosità.

Poi Björk l’ha visto.

Il musicista islandese ha guardato un video su YouTube del dispositivo. Non ha visto solo un bel giocattolo; ha visto un oggetto scenico che corrispondeva alla sua visione artistica. Ha assunto il team per costruire una versione itinerante. Ha portato un DJ che poteva suonarlo durante il suo tour “Volta”. All’improvviso, il reattivo non era più solo un progetto di ricerca. Faceva parte di uno spettacolo pop globale.

L’elemento visivo è diventato centrale. Le connessioni luminose, la manipolazione fisica del suono: aggiungevano uno strato di prestazioni che un laptop o un rack di sintetizzatori non potevano eguagliare. Il pubblico poteva vedere la musica creata. Potevano vedere la causa e l’effetto.

Questa esposizione ha cambiato tutto. Ha dimostrato che la tecnologia complessa può essere resa accessibile, anche in modo teatrale. Il reattivo si è spostato dal laboratorio all’arena. Ha dimostrato che le interfacce tangibili non erano solo per gli ingegneri. Erano per gli artisti. Erano per le persone che volevano toccare la musica.

Perché è importante adesso

Abbiamo superato l’hype iniziale. Ma i principi restano attuali. Il reactable ha dimostrato che la manipolazione diretta delle interfacce digitali potrebbe essere più coinvolgente dei menu astratti. Ha dimostrato che la collaborazione può essere integrata nell’hardware.

Oggi ne vediamo echi in altri strumenti. Alcuni usano il controllo dei gesti. Altri usano i touchscreen. Ma il reagibile è stato uno dei primi a riuscire a rendere visibile l’invisibile. Ha reso il percorso del segnale una cosa fisica che potevi toccare.

Non si tratta solo di fare rumore. Si tratta di rendere chiaro il processo di rendere chiaro il rumore. Trasparente. Condiviso.

I blocchi sono ancora sul tavolo. Le luci sono ancora accese. Ma il vero cambiamento sta nel modo in cui comprendiamo l’interazione. Non ci limitiamo più solo a inserire dati. Manipoliamo lo spazio. Diamo forma al suono con le nostre mani. E possiamo farlo insieme.

C’è una differenza tra vedere una forma d’onda su uno schermo e guardare una linea di luce che collega due cubi. Uno è l’informazione. L’altra è un’esperienza. Il reattivo scelse quest’ultima. Ha scelto di essere sentito, non solo ascoltato.

Toccare un blocco sul tavolo è come avviare il gioco in loop. Ma schiaffeggia un singolo quadrato e hai solo scalfito la superficie. La magia avviene nella geometria. Il punto in cui posizioni queste forme l’una rispetto all’altra determina il suono.

Esistono sei tipi di blocchi distinti. Ognuno ha una silhouette unica e un lavoro sonoro specifico. Se li confondi, la musica cade a pezzi.

I generatori di suoni

Inizia con i quadrati. Fanno rumore. Ruotane uno e sposterai la frequenza. Trascina il dito lungo l’anello animato per aumentare o ridurre l’ampiezza. È come girare la manopola del volume su un vecchio televisore a tubo.

Vuoi metterlo a tacere? Fai un gesto di taglio lungo la linea che collega il blocco al centro del tavolo. Taglia il segnale. Tocca di nuovo l’anello per riportarlo indietro. Semplice.

Filtri e controller

Poi arrivano i quadrati con i bordi arrotondati. Questi sono filtri sonori. Sono i pedali per chitarra dei reattivi. Aggiungi flange, fuzz o feedback. Collega un’onda sinusoidale stabile a un filtro e guardala distorcere in qualcosa di frastagliato e interessante.

Poi ci sono i cerchi. Controller. Inviano dati ai vicini. Sposta un controller vicino a un generatore e ne altererai la frequenza. Puoi ottenere un tono pulito e fluido o deformarlo in un effetto wah-wah.

Geometria complessa

Gli ottagoni e i pentagoni sono i punti in cui la questione diventa pelosa.

I filtri di controllo (a otto lati) e i mixer audio (a cinque lati) gestiscono il lavoro pesante. Fungono da campionatori. Non stai semplicemente ripetendo un tono; stai costruendo linee melodiche intricate. Si armonizzano. Cambiano chiave. Cambiano forma.

Controllo globale

I blocchi emisferici sono oggetti globali. Creano un campo circolare. Qualunque cosa all’interno di quel campo viene influenzata. Di solito funzionano come un metronomo. Mantengono il ritmo. Oppure funzionano come tonalizzatore, correggendo la deriva del tono di generatori e filtri.

L’hardware è solo plastica e sensori. Il software fa il lavoro pesante. Traduce la geometria in audio. Nello specifico, utilizza reacTIVision.

Come il motore reacTIVision tiene traccia dei blocchi fisici

Non puoi vederlo, ma qualcosa osserva ogni tua mossa sul tavolo. Sotto la superficie traslucida, un sistema di visione artificiale nascosto mappa il mondo fisico in dati digitali. L’allestimento è semplice ma efficace: una telecamera e un proiettore nascosti sotto il bosco. Entrambi puntano verso l’alto, ma svolgono lavori completamente diversi.

La macchina fotografica sono gli occhi. Funziona su reacTIVision, un motore di visione specializzato progettato per l’interazione basata su tabelle. Non vede solo macchie di plastica. Analizza punti dati specifici in tempo reale. Quale lato di un blocco è rivolto verso il basso? Dov’è rispetto al centro del tavolo? Quanto dista da un altro isolato? Tiene traccia anche della rotazione. Se fai girare un pezzo attorno al proprio asse, il sistema lo sa. Ogni regolazione tangibile che apporti altera l’intonazione, i filtri o gli effetti e reacTIVision rileva tali modifiche all’istante.

Dal movimento al suono e alla luce

Quindi cosa succede dopo che la telecamera ha visto i blocchi? I dati vanno a una gestione connessione. È qui che la magia si divide in due percorsi.

Innanzitutto, le informazioni vengono inviate a un sintetizzatore audio. Il sintetizzatore interpreta le posizioni dei blocchi come istruzioni musicali. Genera il suono e lo trasmette agli altoparlanti. Questa è la musica che i giocatori stanno creando.

In secondo luogo, gli stessi dati vanno al proiettore. A differenza della macchina fotografica che osserva, il proiettore crea. Brilla attraverso il piano del tavolo blu e traslucido. Dipinge le animazioni direttamente sulla superficie. Queste immagini forniscono un feedback immediato. I giocatori vedono a cosa stanno giocando. Gli spettatori vedono la logica dietro il rumore. Chiude il cerchio tra azione e reazione.

Vederlo in azione

Gli studenti e i ricercatori che hanno costruito il reattivo non lo tengono in laboratorio. Lo portano per strada. Lo vedrai ai festival musicali, alle conferenze tecnologiche e ai musei. Se vuoi assistere a un’esibizione dal vivo, controlla il sito web ufficiale di React per le prossime apparizioni.

Ci sono piani per vendere il dispositivo commercialmente, anche se il prezzo non è stato ancora annunciato. Se non vedi l’ora o non riesci a procurarti i biglietti, Björk è la soluzione migliore. Notoriamente ha usato il sintetizzatore durante il tour. Se lo porta nella tua città, prendila mentre preferisce ancora lo strumento.

Per ulteriori informazioni sulla tecnologia alla base di questi strumenti, approfondisci le risorse di seguito.

Molte altre informazioni

Articoli correlati su HowStuffWorks

  • Come funzionano gli oscillatori
  • Come funziona il MIDI
  • Come funzionano i tour di concerti
  • Come funziona il software di mixaggio musicale
  • Come funziona l’attrezzatura della banda
  • Come funzionano le chitarre elettriche

Altri fantastici collegamenti

  • La Home Page reattiva

Fonti

  • Andrews, Robert. “Il sintetizzatore tattile ReacTable cattura l’occhio e l’orecchio di Björk.” Cablato. 9 agosto 2007.
  • EARS: sito di risorse elettroacustiche. “Musica elettroacustica.”
  • Jordà, Sergi, Günter Geiger, Marcos Alonso e Martin Kaltenbrunner. “The reacTable: esplorare la sinergia tra performance di musica dal vivo e interfacce tangibili da tavolo.” Gruppo di tecnologia musicale, Università Pompeu Fabra. 2007.
  • Jordà, Sergi, Günter Geiger, Marcos Alonso e Martin Kaltenbrunner. “Il reacTable: uno strumento musicale collaborativo.” Gruppo di tecnologia musicale, Università Pompeu Fabra. 2006.
  • Kaltenbrunner, Martin e Ross Benica. “reacTIVision: una struttura di visione artificiale per l’interazione tangibile basata su tabelle.” Gruppo di tecnologia musicale, Università Pompeu Fabra. 2007.