Nous avons déjà vu comment une IA vieillit et rajeunit. Disney va encore plus loin
La monde du cinéma Il nous a déjà permis de profiter de personnages célèbres qui rajeunissent ou vieillissent grâce à la magie de l’intelligence artificielle, mais chez Disney —qui avait déjà fait ses premiers pas dans ce domaine— ils voulaient aller Un pas en avant avec un nouveau système qui a un avantage fondamental : la rapidité avec laquelle il le fait.
la méthode traditionnelle. Lorsqu’un acteur doit paraître plus âgé ou plus jeune, un scan 3D est effectué, suivi d’une modélisation 3D de la cible ou d’une retouche numérique 2D image par image du visage de l’acteur. Le processus c’est lent et délicatmais bien sûr les résultats deviennent spectaculaires comme on a pu le voir dans plusieurs films (‘L’Etrange histoire de Benjamin Button‘ Soit ‘Captain America : Guerre Civile‘, entre autres).
Bonjour Fran. La nouvelle technique de Disney s’appelle Face Re-Aging Network (FRAN) et elle automatise le processus, réduisant le temps et simplifiant le travail des artistes d’effets numériques. Le résultat est vraiment remarquable, comme en témoigne la vidéo mise en ligne par le bureau d’études de Disney.
Comment ça marche. Pour former le système, les chercheurs de Disney ont généré des milliers d’images d’échantillons âgés de 18 à 85 ans en utilisant StyleGAN2.
Après cette phase, FRAN a pu « apprendre » les principes généraux qui définissent l’apparence d’une personne à différents âges, et le système a pu créer des simulations de rajeunissement ou de vieillissement des personnes qui apparaissent dans les vidéos.
Couches et plus de couches. Le système est décrit en détail dans un étude universitairemais l’une des clés est qu’au lieu de générer une personne altérée, cet algorithme prédit quelles parties du visage seront affectées par l’âge.
des résultats spectaculaires. Ainsi, il est possible, par exemple, de supprimer ou d’ajouter des rides, et ces résultats sont ajoutés comme s’il s’agissait de « couches » dans l’information visuelle d’origine. Cela permet de préserver l’apparence et l’identité de la personne, même lorsqu’elle bouge le visage ou fait des gestes.
Dans peu de temps, les rides. Le résultat a été qualifié par Disney de « prêt pour la production » et certainement dans les exemples présentés, vous pouvez voir à quel point contrairement à d’autres moteurs similaires, le rajeunissement et le vieillissement sont mieux finis et n’ont pas d’étranges effets de flou que l’on voit dans d’autres systèmes .
L’outil dispose également d’une interface qui permet aux artistes de l’utiliser facilement dans leurs environnements de production, et il reste maintenant à voir si Disney en particulier et Hollywood en général finiront par utiliser ces outils dans de futures productions.
Image : Disney
