La technologie de capture de mouvement en temps réel qui pourrait donner vie à Alexa et Alexa
NouvellesAvec les jeux axés sur les personnages, l’animation faciale est plus importante que jamais - et les jeux modernes en ont besoin en grande quantité. Les scripts de certaines des versions AAA de cette année couvrent des milliers de pages (contre seulement 120 pour un film hollywoodien moyen), et chaque ligne doit être associée à une performance crédible pour que le joueur reste immergé..
"Nous nous éloignons d'un monde où l'animation faciale est un boucan", a déclaré Steve Caulkin, directeur technique de Cubic Motion, une société spécialisée dans la capture de performances faciales et leur transformation en personnages animés en temps réel..
"Ce que vous pouvez faire avec un moteur de jeu est très impressionnant, et les personnages sont la partie la plus difficile à comprendre, car ce sont eux que les gens scrutent et jugent."
VFX instantané
Cubic Motion, basée à Manchester, au Royaume-Uni, a travaillé avec des développeurs tels qu'Activision, Epic, EA, Ninja Theory et Sony pour créer des animations réalistes pour des histoires de plus en plus profondes et axées sur le caractère..
Des animations en temps réel basées sur des performances en direct donnent aux administrateurs de jeux une idée précise de ce à quoi ressemblera l’animation terminée avant d’entrer dans le processus VFX complet - un peu comme la caméra virtuelle SIMULCAM utilisée par les réalisateurs (comme James Cameron dans Avatar et Brian Singer dans X-Man: Days of Future Past) pour prévisualiser des scènes d’effets spéciaux sur le plateau.
Les réalisateurs peuvent ensuite utiliser ce retour immédiat pour guider les acteurs. "Cela permet au réalisateur de visualiser, revoir et lire", explique Caulkin, "apportant les effets visuels dans le film."
Cela donne non seulement plus de contrôle aux concepteurs de jeux, mais leur permet également de travailler plus rapidement et de traiter un volume énorme de séquences. Au lieu de faire une prise, ils peuvent faire huit et voir à quoi ils ressemblent tous immédiatement.
Cubic Motion a présenté le processus à la GDC 2018, la plus grande conférence de développement de jeux au monde, avec une démonstration en direct de Siren - un projet collaboratif avec Epic Games, 3lateral, Vicon et Tencent..
Siren est un «humain numérique» créé par une équipe internationale d’artistes et d’ingénieurs. Il a été «entraîné» en direct par un humain sur scène, recréant les expressions et les mouvements d’une actrice en temps réel..
Mise à l'échelle
Cubic Motion offre actuellement sa technologie et ses compétences en tant que service aux développeurs de jeux et aux autres clients, mais il va bientôt aussi acheter une licence pour un produit. Le défi, dit Caulkin, consiste à renforcer l'expertise technique et artistique de l'équipe.
"C'est une rencontre de deux mondes, et nous voulons en donner un semblant", dit-il. "Nous avons une équipe de R & D qui est experte dans la recherche d'objets, et dans la mesure où l'élève est dans l'œil. Mais si je suis un personnage et que je souris, et que le monstre sourit, c'est une décision artistique. Nous essayons pour obtenir cette expérience dans la technologie ".
En fin de compte, Cubic Motion a pour objectif de fournir aux clients un package contenant un casque, un logiciel et un support de capture de mouvement pouvant être utilisé immédiatement..
"Nous l'avons déjà fait plusieurs fois, et à chaque fois, nous avons agi de manière plus harmonieuse", déclare Caulkin. "Nous voulons le rendre précis, robuste et reproductible."
Siri, dans la chair
L’animation de jeux vidéo représente le gros du travail de Cubic Motion - en grande partie à cause des différences entre la production de jeux et de films - mais la société voit un potentiel considérable pour sa technologie dans d’autres domaines, notamment les cours de langue en ligne et le support en direct..
"Cela vous permet d'interagir en temps réel avec des caractères numériques, par exemple pour des conférences ou des discussions en ligne", déclare M. Caulkin. "Ensuite, nous commençons à entrer dans les réalités des personnages numériques interactifs. Quelque chose comme Siri ou Alexa pouvant avoir une représentation virtuelle."
Les assistants numériques font d'énormes progrès en termes d'intelligence artificielle, de reconnaissance vocale et de synthèse vocale, mais un visage humain réaliste pourrait être le facteur qui leur permet de se sentir vraiment «intelligent»..
- C’est la technologie qui rendra les jeux plus attrayants et moins coûteux