Diriger une animation par la voix et les gestes – AnimationConductor

Ce projet propose le développement de nouvelles méthodes de modification d'animations de formes et de personnages virtuels à partir de voix et gestes humains, en venant mimer, bruiter, exagérer ou corriger le mouvement déjà chorégraphié. Ces méthodes se focaliseront en particulier sur le contrôle expressif de l'aspect temporel des évènements et déformations et auront pour objectif la modification d'animation existante : resynchronisation, adaptation d'amplitudes, de rythmes et de motifs de mouvements ; ainsi que l'extrapolation à la synthèse de nouvelles.
Plusieurs modalités seront étudiées de manière complémentaire : l'enregistrement sonore, les gestes acquis par vidéos et par outils de réalité virtuelle, avant de proposer une méthodologie prenant avantage d'une entrée multimodale.
Le projet vise des applications concrètes pour la production en cinéma d'animation avec l'intégration d'animateurs infographistes et d'ingénieurs professionnels au cœur de la définition et des avancées du projet, ainsi que par le prototypage open-source à visée professionnelle.