Introduction

Avant d’aborder les différentes utilisations possibles de la vidéo volumétrique, définissons ce qu’est la vidéo volumétrique.

Définition

La vidéo volumétrique, c’est capturer une vidéo non pas comme une image plate, mais comme un volume.
Il s’agit d’une technique qui capture en 3D une performance, un mouvement. Dans le cas d’un humain qui fait une action, cette technique de capture permet d’enregistrer plusieurs choses en même temps à savoir, un corps/une masse sous forme de 3D et la couleur sous forme de texture.

De fait, nous nous retrouvons avec un modèle 3D et une texture associée par image, ce qui permet, en mettant bout à bout ces images, de récupérer un modèle 3D animé photoréaliste.

Le photoréalisme 

Comparativement à une création classique en image de synthèse qui passe par les étapes habituelles et complexes de modeling, texturing, rigging et animation, la vidéo volumétrique rassemble tous ces points au moment de la captation. Et tous ces points sont le plus photoréalistes possibles, car il s’agit de vraies images.

Ce photoréalisme, qui est l’une des grandes valeurs ajoutées de cette technique de captation, est permis par le matériel mis en place, qui rappelle les cabines de scan 3D.

Buzz Aldrin dans une cabine de scan volumétrique

La différence principale avec une cabine de scan est que la captation et la reconstruction sont en vidéo. Selon le besoin technique, la capacité du studio de captation volumétrique pourra varier. Dans la grande majorité des cas, nous avons une captation qui s’effectue dans un studio circulaire avec un cyclo fond vert, des lumières qui viennent uniformiser le fond vert et éclairer le modèle, des micros pour l’éventuel besoin de prise de son et surtout plusieurs dizaines voire centaines de caméras très haute résolution (4k ou plus).

Une cabine de scan volumétrique

Le choix du matériel est très important car il va définir le degré de qualité de la reconstruction volumétrique.
Un haut framerate permet une plus grande fluidité dans les mouvements du personnage capté, la qualité du capteur vidéo a un enjeu sur l’information de lumière captée pour permettre une bonne reconstruction du modèle 3D, et enfin, plus la résolution est grande et plus la texture du personnage capté est photoréaliste.

Le scan volumétrique de Buzz Aldrin dans une scène 3D de Mars

Utilisations

Abordons désormais quelques-unes des multiples utilisations de ce type de contenu.

Il peut s’agir d’intégrer un élément volumétrique dans un moteur 3D pour une scène de jeu vidéo par exemple. La consommation se fera alors sur un écran plat.

Il est également possible d’intégrer ce type de contenu dans un rendu 3D visible dans un casque de réalité virtuelle comme le Quest 2 pour une consommation d’expérience 6DoF (Degrees of Freedom). Le rendu en est alors extrêmement immersif car vous vous retrouvez nez à nez avec le personnage volumétrique scanné, comme s’il était réellement face à vous, et vous pouvez vous approcher et tourner autour de lui pendant qu’il effectue son mouvement, se déplace dans l’espace et parle. 

Nous avions d’ailleurs fait une première expérience volumétrique en 2017 avec Club Med qui offre la possibilité de jouer au golf en VR

Enfin, nous pouvons intégrer ces éléments dans une application de réalité augmentée consommable sur smartphone et faire apparaître dans son salon par exemple une célébrité, une chanteuse ou un joueur de foot et tourner autour de lui. Un exemple assez parlant lorsque nous évoquons ce cas d’utilisation est d’imaginer Cristiano Ronaldo dans son salon qui fait des jongles et s’adresse à nous. Ou bien très récemment le chanteur Sam Smith qui s’est prêté au jeu de la vidéo volumétrique combinée à une application de réalité augmentée pour son nouveau single “Diamonds”.

Le scan volumétrique de Sam Smith

La vidéo volumétrique ouvre un nouveau champ des possibles, et révolutionne la méthode de production d’un contenu 3D photo-réaliste. Notre équipe vous accompagne dans la réflexion et la conception de votre projet volumétrique. Contactez-nous si vous souhaitez tester une expérience en VR 6Dof ! 

Video 360 ? Live 360 ? Développement d’application AR/VR ? Nous sommes disponibles via notre mail contact : info@digitalimmersion.com