Digitalisation humaine profonde à partir d'une entrée minimale – DeepHD

L'objectif de ce projet est de développer une nouvelle génération de méthodes basées sur l'apprentissage profond qui peuvent créer des répliques 3D digitales précises de personnes habillées à partir d'une seule image couleur capturée avec une caméra grand public. Ces répliques peuvent prendre la forme d'une reconstruction 3D colorée explicite du sujet, ou d'une fonction implicite encodant sa forme et son apparence 3D, qui peut ensuite être tessellée en un modèle 3D explicite ou rendue à partir de nouveaux points de vue. Cette recherche a des applications prometteuses dans la génération de contenu 3D humain et la vidéoconférence immersive. Nous proposons des solutions originales aux limitations des méthodes existantes, à savoir leur inefficacité de calcul et utilisation de mémoire, leur manque de généralisation et leur forte dépendance à une supervision 3D complète coûteuse.