Real-time sound-parameter tracking in an audio-video system

L'altezza delle note e altri parametri sonori possono essere detettati in vari modi dipendentemente dalla specifica applicazione richiesta (codifica, segmentazione, classificazione, ecc,) e dalla tipologia di segnali da analizzare. Nel presente lavoro si propone un metodo per il tracking real-time del pitch e del RMS di un segnale musicale per controllare effetti video speciali, in un sistema multimediale nell'ambito di performance artistiche (Pandora System* project). Il tracking del pitch in real time è più difficile dell'inseguimento del RMS, specie quando è richiesto un basso tempo di latenza. E' stato adottato un metodo basato sulla fast-autocorrelation, operando nel dominio del tempo, ottenendo una sufficiente precisione. La demo eseguita al margine della presentazione comprende effetti video speciali controllati con parametri estratti da suoni strumentali eseguiti dal musicista Enrico Cerretti dal vivo.