Tears of Steel : le décor virtuel doit suivre une caméra qui a vraiment bougé
Dans le court métrage d’Ian Hubert, des acteurs filmés rejoignent un Amsterdam peuplé de machines. Pour que les effets tiennent, l’équipe reconstitue le mouvement de la caméra et règle les contacts entre ce qui a été tourné et ce qui a été ajouté.

Reconstituer un déplacement que le décor devra respecter

Lorsqu’une caméra avance devant un mur, une borne au premier plan traverse l’image plus vite que les fenêtres au fond. Cette différence de déplacement, la parallaxe, donne des indices sur la profondeur. Le tracking caméra exploite les mouvements apparents de points appartenant au décor fixe pour retrouver une caméra virtuelle qui reproduise le trajet de la caméra réelle. Le matchmoving désigne ce travail de raccord de mouvement.
Dans les coulisses de Tears of Steel, Sebastian Koenig montre que cette étape précède le détourage des plans sur fond vert. Il enregistre d’abord la caméra reconstituée dans un fichier que les étapes suivantes peuvent reprendre. Ce que l’on ajoute plus tard doit rester au même endroit dans l’espace alors que le cadre et la perspective se déplacent autour.
Garder des repères au tournage, les enlever à la finition

Des marques sur un fond vert peuvent fournir des points que le logiciel suit au cours d’un mouvement. Elles doivent ensuite disparaître du plan. Dans la démonstration de Koenig, les données de suivi servent parfois une deuxième fois, pour faire voyager un masque avec l’élément qu’il faut retirer. Le détourage par la couleur et les masques manuels se complètent autour du corps.
L’équipe livre ensuite une image nettoyée en OpenEXR, avec transparence, et prépare un fichier pour le layout, où seront placés les éléments du plan final. La séparation est utile en cas de retouche. Si une frange verte demeure au bord d’un visage, on sait où reprendre le détourage. Si un élément du fond glisse sur plusieurs images, il faut regarder la caméra ou sa position dans le décor.
Une ombre peut faire tenir ensemble deux espaces

Pour un essai du projet Mango, Nicolò Zubbini et l’équipe incrustent des structures numériques sur des vues réelles d’Amsterdam. Les briques et les pierres photographiées deviennent des références pour leurs matériaux ajoutés. Le test soulève une difficulté plus discrète. Il faut reconstruire les surfaces du décor qui vont recevoir les ombres des objets ajoutés ou en projeter sur eux.
Prenez une passerelle virtuelle fixée à une façade réelle. Le suivi peut la faire rester au bon endroit et le matériau ressembler à celui du mur. À mesure que la caméra bouge, une ombre qui épouse les reliefs du mur aide à situer la passerelle à une distance précise de la façade. Sans ce contact visible, elle peut sembler collée à l’image alors que le suivi est juste.
Vérifier l’effet avec un objet simple, avant le rendu final

Pour préparer un plan de ce type, placez un cube de test à l’emplacement du futur accessoire et regardez la prise en entier. Le pied du cube reste-t-il fixé au sol au début, au milieu et à la fin ? Vérifiez un deuxième repère à une autre profondeur. Un objet peut sembler stable sur un seul axe ou pendant quelques images et dériver dès que la caméra change de direction.
Gardez ensuite ce cube assez longtemps pour vérifier une occultation, le moment où une personne ou un objet réel passe devant lui. Le mouvement, les bords et le contact avec le décor peuvent ainsi être contrôlés séparément. C’est moins coûteux de découvrir un problème de perspective sur un cube gris qu’après avoir réglé le reflet de chaque pièce d’un robot.









