Refilmer une scène après le tournage : Gracia veut reconstruire le réel en 4D

Gracia dévoile un modèle de reconstruction 4D pour recréer des scènes filmées sous de nouveaux angles, avec des applications en cinéma, sport et robotique.

Changer l'angle d'une caméra après un tournage, observer un geste sportif depuis un point de vue qui n'a jamais été filmé ou intégrer la performance réelle d'un acteur dans un environnement virtuel. Ces possibilités sont au cœur du World Reconstruction Model de Gracia, un système d'intelligence artificielle capable de transformer des enregistrements provenant de plusieurs caméras en scènes tridimensionnelles animées. Sa particularité : privilégier la reconstruction géométrique du réel plutôt que la génération d'images à partir d'une interprétation libre des événements. Reconstituer une scène sans inventer ce qui s'est passé

Les modèles vidéo génératifs peuvent créer de nouveaux angles de vue, mais ils risquent aussi d'inventer des éléments absents des enregistrements : détails d'un objet, position d'un membre ou mouvement d'un personnage.

Gracia cherche à réduire cette incertitude en reconstruisant la géométrie et les mouvements à partir de prises de vue réelles. Le résultat prend la forme d'une représentation 4D, associant un environnement en trois dimensions à son évolution dans le temps.

Le système s'appuie notamment sur le 4D Gaussian Splatting (4DGS), une technique permettant de représenter des scènes volumétriques animées et de les afficher sous différents angles.

Gracia revendique une précision géométrique inférieure au millimètre et une restitution fidèle aux enregistrements. Cette précision n'est toutefois pas accompagnée, à ce stade, d'un protocole public permettant de vérifier les conditions dans lesquelles elle est obtenue. L'entreprise présente également son approche comme une reconstruction sans hallucinations, une affirmation à distinguer d'une garantie absolue d'exactitude. Quatre à huit caméras pour revoir une action sportive

L'une des applications les plus concrètes concerne la retransmission sportive. Plutôt que de dépendre uniquement des angles filmés pendant une action, les réalisateurs peuvent reconstruire la scène puis déplacer virtuellement la caméra autour des participants.

Sur sa présentation consacrée au sport, Gracia indique que son nouveau système peut fonctionner avec quatre à huit caméras et produire des ralentis sous des angles libres dans un délai proche du temps réel.

À titre de comparaison, ses méthodes classiques de reconstruction volumétrique nécessitent souvent plus de 40 caméras spécialisées et au moins 24 heures de traitement.

La technologie de Gracia avait déjà été utilisée lors du PGA Championship 2026, en collaboration avec Radiant Images. Pour cette production, les mouvements de plusieurs golfeurs avaient été capturés avec 56 iPhone 17 Pro, avant d'être reconstruits pour une diffusion télévisée environ 24 heures plus tard.

Cette démonstration reposait sur un dispositif 4DGS antérieur et ne doit donc pas être confondue avec une validation du nouveau système à quatre caméras et de son traitement quasi immédiat. <Cite ref="turn389769search3"/> Les acteurs deviennent des performances volumétriques

Dans le cinéma et les effets visuels, l'intérêt est de conserver une interprétation réellement filmée tout en retrouvant une liberté de cadrage lors de la postproduction.

Un acteur capturé en 4D peut être intégré dans une scène numérique, observé sous un autre angle ou associé à un environnement virtuel. Le réalisateur conserve ainsi une performance existante, sans devoir nécessairement recréer ses mouvements par animation.

Gracia cite notamment le clip Nightshift Superstar de Muse, réalisé avec Radiant Images, dans lequel Matt Bellamy a été transformé en représentation volumétrique animée.

Le workflow VFX de Gracia prévoit également des possibilités de modification de l'éclairage et une intégration dans des outils comme Unreal Engine et Unity.

Cette liberté dépend néanmoins de la qualité et de la couverture des prises de vue initiales. Une reconstruction, même avancée, ne peut pas garantir la présence de détails qu'aucune caméra n'a correctement enregistrés. Des environnements physiques pour entraîner les robots

Gracia cible également la robotique avec des applications dites Real2Sim2Real. Le principe consiste à capturer des situations réelles, les reconstruire dans un environnement numérique, puis exploiter ces données pour entraîner ou évaluer des systèmes robotiques avant leur retour dans le monde physique.

La technologie peut notamment fournir des informations sur la profondeur, la position d'objets et le mouvement des mains. Ces données peuvent contribuer à tester des comportements ou à comparer les performances d'un robot dans des situations reproduites.

Le défi reste la fidélité physique des environnements reconstruits. Une scène visuellement réaliste ne suffit pas toujours à décrire correctement les contacts, les forces ou les propriétés des matériaux nécessaires à certaines simulations robotiques. Du tournage au moteur 3D

Gracia présente son système comme indépendant d'une marque de caméra particulière, même si les dispositifs de capture doivent respecter des contraintes techniques, notamment la synchronisation matérielle des prises de vue.

Ses outils comprennent une suite de traitement 4DGS et des SDK destinés à Unity, Unreal Engine, au web, à Python, C/C++ et aux plateformes Apple. L'entreprise propose aussi des solutions de diffusion pour les navigateurs et les casques immersifs.

Les prestations restent principalement organisées autour de projets professionnels. Sur son offre 4DGS classique, Gracia affiche des tarifs de traitement à partir de 800 dollars par minute pour le streaming et la réalité virtuelle, et de 2 500 dollars par minute pour les usages VFX. Ces prix ne constituent pas nécessairement ceux du nouveau World Reconstruction Model.

Avec cette technologie, Gracia explore une direction différente de celle des générateurs vidéo traditionnels. Il ne s'agit plus de demander à une IA d'imaginer une scène, mais de lui faire reconstruire un événement déjà capturé pour pouvoir l'examiner, le modifier ou le réutiliser.

La distinction est essentielle pour