Une nouvelle génération d'outils basés sur l'IA pour des expériences médiatiques accessibles et personnalisées
Des scientifiques de l'Université de Surrey enseignent à des modèles d'intelligence artificielle de rééclairer différents types de corps et de vêtements sans avoir recours à la modélisation 3D. Cela pourrait avoir un impact positif sur les industries du cinéma, de la télévision et des jeux vidéo dans un avenir proche.
Les approches actuelles de l'IA pour rééclairer les personnes nécessitent souvent la création d'un modèle géométrique 3D sous la forme de maillages triangulaires ou de nuages de points avant que les effets d'ombre corrects puissent être appliqués.
Ce nouveau modèle, en revanche, ne nécessite que des images 2D de personnes, ainsi que des changements d'éclairage, pour permettre à la technique proposée de restituer des effets d'auto-ombre. Le document est publié dans L'Association Eurographique journal.
Farshad Einabadi, chercheur principal au Centre de traitement de la vision, de la parole et du signal (CVSSP) de l'Université de Surrey, a déclaré : « Ce projet AI4ME est un excellent exemple de la manière dont l'IA peut être utilisée pour contribuer à accroître l'accessibilité et le réalisme des techniques de composition dans le cinéma et la télévision en enseignant à des modèles informatiques à quoi ressemblent les types de corps humains, les articulations et les vêtements dans différents environnements d'éclairage sans recourir à une modélisation 3D longue et coûteuse. Il permet une approche alternative du (ré)éclairage des acteurs et des acteurs. présentateurs.
« Nous pouvons réduire considérablement le temps et les coûts nécessaires pour restituer (rééclairer) des images du corps humain complet en formant des modèles d'IA sur la manière de s'adapter à différents scénarios d'éclairage, de type de corps et de vêtements. Cette recherche et ses résultats devraient être utiles, par exemple, pour que les studios augmentent leurs pipelines de production sur écran vert. »
Le professeur Adrian Hilton, directeur du Surrey Institute for People-Centered AI, a déclaré : « Les recherches d'AI4ME sont pionnières en matière d'approche utilisant l'IA pour permettre un montage vidéo avancé de l'éclairage et des ombres, qui nécessite normalement une modélisation 3D coûteuse.
« Cette avancée aura un impact sur les industries créatives britanniques, en introduisant une nouvelle génération d'outils créatifs basés sur l'IA pour la production cinématographique et télévisuelle qui préservent le réalisme vidéo et en permettant aux consommateurs d'accéder à un prix abordable à des technologies créatives avancées et à des expériences médiatiques personnalisées.