Catturare le caratteristiche facciali in 3D
Il progetto CUSTODIEV ha messo a punto una tecnologia di tratteggio artistico con un processo di creative pull (estro creativo) che apre nuove strade all'animazione. Uno dei risultati ottenuti è un sistema di cattura dinamica tridimensionale che ha risolto il difficile problema della cattura 3D in tempo reale senza contatto. ll sistema cattura in tempo reale le immagini da 24 videocamere ed elabora il flusso di immagini video combinate. Successivamente crea un modello 3D che riproduce comportamento e aspetto del soggetto. L'obiettivo è quello di ritenere le caratteristiche dei punti prominenti del volto e della testa e usarle per i FAP (Facial Animation Parameters) MPEG-4, che, a loro volta, pilotano un modello animato del volto e della testa. I FAP sono in grado di cogliere particolarità, ad esempio l'iride degli occhi, difficili da ritenere con altri mezzi di cattura del movimento. La principale spinta allo sviluppo del sistema di cattura dinamico è venuta dal desiderio di rendere più facile riprodurre personaggi storici in movimento. Anche se è facile animare un volto, è invece molto difficile riprodurre uno specifico carattere della mimica facciale. Con qualche ulteriore ottimizzazione, la cattura dinamica potrà in futuro consentire un nuovo stile di animazione facciale.