La version 4.25 d'Unreal Engine est associée à l'application iOS pour capturer les mouvements du visage
La version 4.25 d'Unreal Engine peut être associée à une nouvelle application iOS, Live Link pour Unreal Engine, pour capturer les expressions faciales des acteurs en direct. La nouvelle application s'appuie sur le logiciel sophistiqué de reconnaissance faciale et de suivi des mouvements déjà inclus dans les iPhones. Ainsi, si votre iPhone possède déjà une caméra de profondeur et des capacités ARKit, vous pouvez accéder gratuitement à ces nouvelles fonctionnalités d'Unreal Engine en téléchargeant l'application sur l'App Store.
Basé sur une démo en ligne, les capacités brutes de cette nouvelle application sont assez impressionnantes. Les grands mouvements du visage tels que les mouvements de la bouche, les mouvements des yeux et d'autres grands mouvements du visage sont capturés en douceur en temps réel. Il fonctionne en mappant les animations prédéfinies d'un concepteur aux expressions faciales suivies par ARKit. Par exemple, un iPhone avec ces capacités note lorsque vous clignez des yeux et a un déclencheur d'événement pour cette action. Avec Live Link pour Unreal Engine, vous pouvez mapper cet événement à une animation de votre personnage clignotant à l'œil droit. Désormais, chaque fois que votre acteur en direct clignote de l'œil droit, l'animation du clignotement de l'œil droit de votre personnage de jeu est déclenchée.
Je suis ravi de voir comment cette nouvelle technologie sera mise en œuvre. L'application vient d'être publiée, il est donc trop tôt pour voir des exemples de sa pleine capacité. Sur la base des démos que j'ai regardées et des exemples de photos publiés dans le communiqué de presse, un problème potentiel est la capture de mouvements fins du visage. Par exemple, ce sont les mouvements musculaires fins autour des yeux qui nous donnent des indices subtils sur le véritable état émotionnel de ceux qui nous entourent. Sans cela, les personnages peuvent sembler plats et sans vie, poussant le personnage dans l'étrange vallée. Ce n'est pas un gros problème pour la conception de jeux, car ces détails pourraient être ajoutés une fois que la majorité du travail sera effectué avec cet outil de capture. Cependant, je me demande si Live Link pour Unreal Engine verra un large attrait pour les flux en direct si c'est effectivement une limitation.
Vous êtes développeur et essayez l'application Live Link for Unreal Engine? Publiez un lien vers ce sur quoi vous travaillez ci-dessous. Ou si vous avez réfléchi à la façon dont cette nouvelle technologie pourrait être utilisée, veuillez partager dans les commentaires ci-dessous.
Sources: Gamastra, App Store, documents Unreal Engine, YouTube et Unreal Engine
