Grâce à cette technologie, des figures emblématiques comme Gollum, César dans La Planète des Singes, ou encore Thanos dans Avengers ont pu prendre vie avec un réalisme impressionnant. Mais comment fonctionne réellement la performance capture et quelles sont ses applications ?
Motion capture vs performance capture : quelles différences ?
Avant d’explorer les détails de la performance capture, il est essentiel de comprendre la différence avec la motion capture.
- La motion capture (mocap) enregistre uniquement les mouvements du corps. Elle est utilisée depuis les années 90 dans des films et jeux vidéo pour donner une animation fluide aux personnages numériques.
- La performance capture (pcap) va plus loin en enregistrant simultanément les mouvements du corps, les expressions faciales et la voix. Cela permet une immersion totale et une retranscription fidèle du jeu de l’acteur.
Avec la performance capture, chaque micro-expression, chaque clignement d’œil et chaque mouvement des lèvres sont fidèlement reproduits sur un avatar numérique.
Comment fonctionne la performance capture ?
La performance capture repose sur plusieurs étapes clés :
- Préparation des acteurs
- Les comédiens portent une combinaison spéciale recouverte de capteurs (ou marqueurs) pour enregistrer leurs mouvements.
- Des caméras haute précision suivent ces capteurs et analysent leurs déplacements dans l’espace.
- Enregistrement des expressions faciales et de la voix
- Un casque équipé de capteurs et d’une caméra faciale est utilisé pour enregistrer les expressions en détail.
- La voix est capturée simultanément pour une synchronisation parfaite avec les animations.
- Conversion en données numériques
- Les informations captées sont transformées en données 3D grâce à un logiciel spécifique.
- Un squelette numérique est créé pour retranscrire les mouvements avec précision.
- Application aux personnages 3D
- Les données de l’acteur sont superposées à un avatar numérique.
- Les animateurs peaufinent les textures, la lumière et l’animation pour un rendu hyperréaliste.
Les types de technologie utilisés
Capture optique
Cette méthode utilise des caméras infrarouges pour suivre les marqueurs placés sur le corps et le visage des acteurs. C’est la technique la plus couramment utilisée dans le cinéma et les jeux vidéo.
Capture inertielle
Ici, ce sont des capteurs de mouvement (accéléromètres et gyroscopes) qui suivent les déplacements des acteurs. Cette approche est moins contraignante, car elle ne nécessite pas un environnement rempli de caméras.
Capture sans marqueur
Une technologie plus récente qui utilise des algorithmes d’intelligence artificielle et de vision par ordinateur pour suivre le mouvement sans avoir besoin de marqueurs. Cette technique a été utilisée pour The Irishman, où Robert De Niro a été rajeuni numériquement.
Exemples d’utilisation de la performance capture
Au cinéma
De nombreux films utilisent cette technologie pour donner vie à des créatures fantastiques ou des personnages entièrement numériques.
- Le Seigneur des Anneaux : Andy Serkis incarne Gollum en utilisant un système de performance capture avancé.
- Avatar : James Cameron utilise cette technologie pour animer les Na’vis avec un niveau de détail impressionnant.
- La Planète des Singes : César, joué par Andy Serkis, est un des premiers personnages à exploiter pleinement le potentiel de la performance capture.
- Avengers : Thanos, incarné par Josh Brolin, est un autre exemple d’animation hyperréaliste.
Dans les jeux vidéo
La performance capture est également très utilisée dans les jeux vidéo, notamment pour rendre les personnages plus réalistes.
- The Last of Us : Les animations faciales et corporelles des personnages sont enregistrées en performance capture.
- Detroit: Become Human : Chaque détail du jeu repose sur cette technologie pour renforcer l’immersion.
- Red Dead Redemption 2 : Les expressions faciales des personnages sont d’un réalisme saisissant grâce à la capture intégrale des performances.
Dans les concerts et spectacles
- ABBA Voyage : Le groupe ABBA a utilisé la performance capture pour créer des avatars numériques reproduisant leurs performances des années 70.
- Michael Jackson Hologram : Un concert posthume a été réalisé en utilisant une combinaison de performance capture et d’hologrammes.
Les avantages de la performance capture
Un réalisme inégalé
Avec la performance capture, chaque détail du jeu d’acteur est fidèlement retranscrit, créant une immersion totale.
Plus de liberté pour les réalisateurs
Une fois capturée, la performance d’un acteur peut être modifiée et réutilisée à l’infini. Les réalisateurs peuvent ainsi ajuster les mouvements de caméra, changer l’angle de vue, ou encore modifier l’environnement sans devoir retourner la scène.
Une solution économique
Même si la performance capture représente un coût initial élevé, elle permet d’économiser sur les décors, les effets spéciaux physiques et le tournage en conditions réelles.
L’avenir de la performance capture
Avec les avancées technologiques, la performance capture devient de plus en plus accessible. Certains smartphones commencent déjà à proposer des outils de motion capture simplifiée, et l’intelligence artificielle ouvre de nouvelles perspectives.
Dans quelques années, il sera peut-être possible pour n’importe quel créateur de produire des films ou des jeux en utilisant des avatars hyperréalistes générés à partir de simples vidéos.
La performance capture continue d’évoluer et s’impose comme un outil indispensable pour le futur du cinéma, des jeux vidéo, et même du métavers.
