Agrandir / Un exemple de l’IA changeant d’âge FRAN de Disney qui montre l’image originale sur les rangées de gauche et vieillies d’exemples plus âgés (en haut, à 65 ans) et plus jeunes (en bas, à 18 ans) de la même personne.
Des chercheurs de Disney ont créé un nouveau réseau de neurones qui peut modifier l’âge visuel des acteurs de télévision ou de cinéma, rapporte Gizmodo. La technologie permettra aux producteurs de télévision ou de cinéma de faire paraître les acteurs plus âgés ou plus jeunes en utilisant un processus automatisé qui sera moins coûteux et moins long que les méthodes précédentes.
Traditionnellement, lorsque le personnel des effets spéciaux d’une production vidéo ou cinématographique doit faire paraître un acteur plus âgé ou plus jeune (une technique que Disney appelle le “re-vieillissement”), il utilise généralement soit un processus de numérisation 3D et de modélisation 3D, soit un processus 2D image par image. -frame retouche numérique du visage de l’acteur à l’aide d’outils similaires à Photoshop. Ce processus peut prendre des semaines ou plus, selon la durée du travail.
En revanche, la nouvelle technique d’IA de Disney, appelée Face Re-aging Network (FRAN), automatise le processus. Disney l’appelle “la première méthode pratique, entièrement automatique et prête pour la production pour le vieillissement des visages dans les images vidéo”.
Une vidéo de démonstration de recherche pour la technologie de vieillissement de Disney.
Pour construire FRAN, les chercheurs de Disney ont généré au hasard des milliers d’exemples de visages vieillis synthétiquement entre 18 et 85 ans à l’aide de StyleGAN2. Avec ces données de formation en main, FRAN a appris des principes généraux sur la façon dont l’apparence d’une personne change avec l’âge. Maintenant que la formation est terminée, il peut appliquer ces principes de vieillissement à un véritable acteur en mouvement, image par image.
Publicité
“Notre réseau est formé de manière supervisée sur un grand nombre de paires d’images de visage montrant la même personne synthétique et photoréaliste, étiquetées avec les âges source et cible correspondants”, ont écrit les chercheurs dans un article académique correspondant. En générant les données de formation de manière synthétique, ils ont contourné la “tâche apparemment impossible” de collecter des images représentant “une variété d’identités, d’âges et d’ethnies sous différents points de vue”.
Le résultat est ce que Disney appelle une solution “prête pour la production”, ce qui signifie qu’elle crée une sortie de qualité suffisamment élevée pour être utilisée dans un vrai film ou une émission de télévision. C’est peut-être la première solution d’IA de ce type qui peut modifier dynamiquement l’âge d’un acteur sur une vidéo malgré des expressions, des conditions d’éclairage et des points de vue variables. Les chercheurs ont également développé une interface conviviale pour FRAN qui permettra aux artistes d’utiliser facilement l’outil dans un environnement de production.
Disney a présenté mercredi la recherche dans un article intitulé “Production-Ready Face Re-Aging for Visual Effects” et l’a soumise pour inclusion à la conférence ACM SIGGRAPH Asia 2022 en décembre. Les auteurs de l’article incluent Gaspard Zoss, Prashanth Chandran, Eftychios Sifakis, Markus Gross, Paulo Gotardo et Derek Bradley, tous affiliés aux studios de recherche Disney à Zurich, en Suisse.
Compte tenu de l’histoire de Disney avec l’insertion d’acteurs générés par ordinateur dans les films et émissions de télévision Star Wars, y compris certains qui ont été vieillis à l’aide de CGI, nous ne serions pas surpris de voir une technologie similaire à FRAN largement utilisée dans les futures productions Disney, bien qu’aucun plan n’ait été annoncé.
