InterFace è un ambiente di sviluppo interattivo e flessibile, realizzato all’ISTC-SPFD in Matlab, con lo scopo di accelerare l’analisi dei dati bimodali, e l’estrazione, la modellizzazione ed il test dei parametri necessari all’animazione audio-visuale. Interface può elaborare quattro differenti tipi di dati in ingresso: dati reali, acquisiti da sistemi di cattura degli andamenti cinematici dell’articolazione facciale - l’elaborazione di questi dati permette di realizzare una tipica Data-Driven Synthesis; dati testuali, da cui generare il flusso di dati audio-video di controllo dell’animazione facciale - Text-to-Animation Synthesis, ovverosia una Symbolic-Driven Synthesis; dati audio, da cui ricavare la segmentazione fonetica con un sistema di riconoscimento automatico e ottenere in questo modo la sequenza dei fonemi necessari ad una animazione sincrona con l’audio - Wav-to-Animation Synthesis: dati a basso livello, per controllare manualmente il movimento di uno o più parametri di animazione e verificarne l’effetto con la sintesi video - Manual-Driven Synthesis.

INTERFACE

P Cosi;
2005

Abstract

InterFace è un ambiente di sviluppo interattivo e flessibile, realizzato all’ISTC-SPFD in Matlab, con lo scopo di accelerare l’analisi dei dati bimodali, e l’estrazione, la modellizzazione ed il test dei parametri necessari all’animazione audio-visuale. Interface può elaborare quattro differenti tipi di dati in ingresso: dati reali, acquisiti da sistemi di cattura degli andamenti cinematici dell’articolazione facciale - l’elaborazione di questi dati permette di realizzare una tipica Data-Driven Synthesis; dati testuali, da cui generare il flusso di dati audio-video di controllo dell’animazione facciale - Text-to-Animation Synthesis, ovverosia una Symbolic-Driven Synthesis; dati audio, da cui ricavare la segmentazione fonetica con un sistema di riconoscimento automatico e ottenere in questo modo la sequenza dei fonemi necessari ad una animazione sincrona con l’audio - Wav-to-Animation Synthesis: dati a basso livello, per controllare manualmente il movimento di uno o più parametri di animazione e verificarne l’effetto con la sintesi video - Manual-Driven Synthesis.
2005
Istituto di Scienze e Tecnologie della Cognizione - ISTC
Animazione Facciale
Talking Head
TTS
Sintesi da Testo Scritto
File in questo prodotto:
Non ci sono file associati a questo prodotto.

I documenti in IRIS sono protetti da copyright e tutti i diritti sono riservati, salvo diversa indicazione.

Utilizza questo identificativo per citare o creare un link a questo documento: https://hdl.handle.net/20.500.14243/196551
Citazioni
  • ???jsp.display-item.citation.pmc??? ND
  • Scopus ND
  • ???jsp.display-item.citation.isi??? ND
social impact