Real-time sound-parameters tracking in a multimedia system

Abstract Pitch and other audio parameters can be detected in various ways depending on the specific application (codifying, segmentation, classification, etc,) and the type of musical signals analyzed. This paper addresses real-time tracking of the pitch and RMS of an audio music signal for the purpose of controlling certain video effects in a multimedia system for artistic performance (Pandora System Project). Pitch tracking is more difficult than RMS measurement, especially when low latency is required. For our purpose was adopted the fast-autocorrelation algorithm, carried out in the time domain, and thus attaining satisfactory precision. Some graphic results will be presented along with sound samples.

La rilevazione del pitch e di altri parametri audio viene eseguita in modi diversi a seconda delle specifiche applicazioni (codifica, segmentazione, classificazione, ecc.) e del tipo di segnali audio musicali da analizzare. In questa discussione sarà illustrato il processo di tracking in tempo reale del pitch e dell'RMS di un segnale audio musicale finalizzato al controllo di alcuni effetti video presenti in un sistema multimediale da utilizzare nelle rappresentazioni artistiche (progetto Pandora). Contrariamente alla misura RMS, la misura del pitch richiede particolare attenzione soprattutto nella minimizzazione del tempo di latenza. In questa specifica esperienza è stato utilizzato l'algoritmo di autocorrelazione veloce, eseguita nel dominio del tempo, ottenendo una sufficiente precisione. Alcuni risultati grafici saranno presentati congiuntamente a esempi audio.