Tracking in tempo reale di parametri audio nei sistemi multimediali

Abstract Pitch and other audio parameters can be detected in various ways depending on the specific application (codifying, segmentation, classification, etc,) and the type of musical signals to be analyzed. This paper addresses real-time tracking of the pitch and RMS of an audio music signal for the purpose of controlling certain video effects in a multimedia system for artistic performance (Pandora System Project). Pitch tracking is more difficult than RMS measurement, especially when low latency is required. For our purpose was adopted the fast-autocorrelation algorithm, carried out in the time domain, and thus attaining satisfactory precision. Some graphic results will be presented along a demo live with sound samples.

Sommario La rilevazione del pitch e di altri parametri audio viene eseguita in modi diversi a seconda delle specifiche applicazioni (codifica, segmentazione, classificazione, ecc.) e del tipo di segnali audio musicali da analizzare. In questa discussione sarà illustrato il processo di tracking in tempo reale del pitch e dell'RMS di un segnale audio musicale finalizzato al controllo di alcuni effetti video inseriti in un sistema multimediale da utilizzare nelle rappresentazioni artistiche (progetto Pandora). Contrariamente alla misura RMS, la misura del pitch richiede particolare attenzione soprattutto nella minimizzazione del tempo di latenza. In questa specifica esperienza è stato utilizzato l'algoritmo di autocorrelazione veloce, eseguita nel dominio del tempo, ottenendo una sufficiente precisione. Alcuni risultati saranno presentati tramite una demo con sequenze video pilotate da suoni eseguiti da un musicista dal vivo.