Menu Fermer

Réveil photo convertit les images fixes en animations AR

Une équipe de chercheurs donne vie aux photos 2D avec des animations 3D automatiques.

Alors que la technologie de la RA continuait de se développer depuis ses débuts, l'un des cas d'utilisation les plus populaires jusqu'à présent a été l'amélioration numérique d'images réelles. Grâce à diverses techniques, telles que les marqueurs AR cachés – qui, lorsqu'ils sont numérisés avec un appareil intelligent, l'appareil photo offre une expérience supplémentaire enrichie – tout le monde, des artistes aux entreprises, a utilisé cette technologie pour ajouter une toute nouvelle dimension à leurs projets.

Avec Photo Wake-Up, une nouvelle forme d’animation de personnages 3D, une équipe de chercheurs de l’Université de Washington a développé l’idée des photos améliorées en réalité augmentée en introduisant une technique permettant de convertir une image 2D en une animation 3D qui, avec l'aide de la technologie AR, peut littéralement entrer dans notre réalité.

Crédit d'image: Chung-Yi Weng, Brian Curless, Ira Kemelmacher-Shlizerman

En utilisant un programme appelé SMPL associé à un apprentissage en profondeur, les chercheurs ont mis au point un système capable de découper le sujet dans une image 2D, de le truquer sur un squelette préconfiguré, puis de l'animer avec une série de mouvements prédéterminés, tels que la course, marcher et sauter. Lorsqu'elle est utilisée avec un appareil intelligent, tel qu'un smartphone ou une tablette, l'animation 3D peut alors «se réveiller» physiquement de sa forme 2D et entrer dans la réalité. Regarde ce que j'ai fait là? L’équipe, composée de Chung-Yi Weng, Brian Curless et Ira Kemelmacher-Shlizerman, a utilisé une collection de plus de 70 images obtenues en ligne, allant de Steph Curry à la couverture des Beatles, Ironman à des œuvres du légendaire street artiste Banksy.

«Notre méthode fonctionne avec une grande variété de photos du corps entier et plutôt frontales, allant des photos de sport à l’art, en passant par les affiches», a déclaré l’équipe lors d’une interview avec MIT Technology Review.

«Nous pensons que la méthode permet non seulement aux utilisateurs d’apprécier et d’interagir avec les photos, mais également de suggérer un moyen de reconstruire un avatar virtuel à partir d’une image unique tout en offrant un aperçu de l’état de la modélisation humaine à partir d’une seule photo. ”

L'équipe a fourni un document détaillant les spécificités de leur technique, ainsi que diverses informations supplémentaires.

«Nous présentons une méthode et une application pour animer un sujet humain à partir d'une seule photo. Par exemple, le personnage peut sortir, courir, s'asseoir ou sauter en 3D », résume le résumé des papiers.

La publication Photo Wake-Up convertit les images fixes en AR Les animations sont apparues en premier sur VRScout.