InterFace è un ambiente di sviluppo interattivo e flessibile, realizzato allISTC-SPFD in Matlab, con lo scopo di accelerare lanalisi dei dati bimodali, e lestrazione, la modellizzazione ed il test dei parametri necessari allanimazione audio-visuale. Interface può elaborare quattro differenti tipi di dati in ingresso: dati reali, acquisiti da sistemi di cattura degli andamenti cinematici dellarticolazione facciale - lelaborazione di questi dati permette di realizzare una tipica Data-Driven Synthesis; dati testuali, da cui generare il flusso di dati audio-video di controllo dellanimazione facciale - Text-to-Animation Synthesis, ovverosia una Symbolic-Driven Synthesis; dati audio, da cui ricavare la segmentazione fonetica con un sistema di riconoscimento automatico e ottenere in questo modo la sequenza dei fonemi necessari ad una animazione sincrona con laudio - Wav-to-Animation Synthesis: dati a basso livello, per controllare manualmente il movimento di uno o più parametri di animazione e verificarne leffetto con la sintesi video - Manual-Driven Synthesis.
INTERFACE
P Cosi;
2005
Abstract
InterFace è un ambiente di sviluppo interattivo e flessibile, realizzato allISTC-SPFD in Matlab, con lo scopo di accelerare lanalisi dei dati bimodali, e lestrazione, la modellizzazione ed il test dei parametri necessari allanimazione audio-visuale. Interface può elaborare quattro differenti tipi di dati in ingresso: dati reali, acquisiti da sistemi di cattura degli andamenti cinematici dellarticolazione facciale - lelaborazione di questi dati permette di realizzare una tipica Data-Driven Synthesis; dati testuali, da cui generare il flusso di dati audio-video di controllo dellanimazione facciale - Text-to-Animation Synthesis, ovverosia una Symbolic-Driven Synthesis; dati audio, da cui ricavare la segmentazione fonetica con un sistema di riconoscimento automatico e ottenere in questo modo la sequenza dei fonemi necessari ad una animazione sincrona con laudio - Wav-to-Animation Synthesis: dati a basso livello, per controllare manualmente il movimento di uno o più parametri di animazione e verificarne leffetto con la sintesi video - Manual-Driven Synthesis.I documenti in IRIS sono protetti da copyright e tutti i diritti sono riservati, salvo diversa indicazione.