Esperienze di sonificazione nella computer music e nella riabilitazione all'ISTI -CNR

La sonificazione consiste nella generazione di suoni non verbali in funzione di dati di diversa natura utile a interpretarne certe proprietà. E' oramai impiegata in molti settori ed è in continuo sviluppo di pari passo con il progresso tecnologico. In questo lavoro vengono richiamati i principali elementi che la contraddistinguono e alcune tipiche applicazioni. Nel laboratorio di Segnali e Immagini (SILab) dell'ISTI-CNR di Pisa speciali meccanismi di sonificazione del gesto sono stati applicati nell'ambito della computer music. Leonello Tarabella ha poi sviluppato l'idea di far dipendere la generazione dei suoni dalla gestualità dei musicisti, arricchendo le musiche con la dimensione performativa.I sistemi via via sviluppati sono basati principalmente su sensoristica a infrarossi e sull'analisi in tempo reale di segnali video acquisiti da telecamere. Seppure nella maggior parte dei progetti realizzati la tipologia dei suoni generati è di valenza quasi esclusivamente musicale, le tecniche utilizzate e i sistemi sviluppati si possono inquadrare nell'ambito della sonificazione. Le competenze acquisite hanno permesso in seguito di lavorare allo sviluppo di sistemi più attinenti, in senso più stretto, al campo della sonificazione. Infatti, cambiando le sonorità di uscita e le strategie di elaborazione dei movimenti dei soggetti, i sistemi sono stati usati anche nell'ambito della medicina riabilitativa: in particolare l'auditory feedback del movimento ha permesso di realizzare ambienti interattivi per il trattamento di disturbi del comportamento, nel quale l'interazione con l'ambiente circostante è compromessa, come i disturbi dello spettro autistico. Nel seguito daremo un cenno ad alcune problematiche coinvolte in generale nella sonificazione, a cui seguirà una breve descrizione di alcuni dei sistemi sviluppati, dei risultati ottenuti e una riflessione sulla funzione del mapping.