Modifier les expressions faciales sur une vidéo en temps réel

Lecteur : -

Une équipe de chercheurs de l'université Stanford, en collaboration avec des équipes de l’université Friedrich-Alexander d'Erlangen-Nuremberg et de l'Institut Max-Planck d'informatique, nous fait la démonstration d'un logiciel mis au point dans le cadre du projet « Face2Face » et capable de modifier les expressions faciales en temps réel sur une vidéo, comme un extrait d'une vidéo YouTube. Le logiciel analyse en temps réel la vidéo source et reconstitue un modèle 3D du visage. Cette opération est également réalisée à partir de la personne servant de modèle pour les expressions faciales, celle-ci étant filmée par une simple webcam. Un algorithme reconstitue ensuite les mouvements de la bouche, des yeux et des sourcils en temps réel sur le visage de la personne présente sur la vidéo source, en l'occurrence des hommes politiques comme George W. Bush, Vladimir Poutine, Barack Obama ou Donald Trump. Le résultat de cette démonstration est bluffant, même si le chercheur force parfois un peu ses expressions pour tester le moteur du logiciel.