Suivi de caméra dans Blender : intégrer un modèle 3D à une vidéo

Ce que vous apprendrez dans ce guide

Lorsque vous ajoutez un élément architectural 3D à une prise de vue réelle, le modèle doit suivre les mouvements de caméra de la vidéo. Les outils de suivi de mouvement de Blender suivent des marqueurs dans l’image afin d’aider à résoudre le mouvement de la caméra ou celui d’un objet par rapport à la caméra. Les données de suivi obtenues peuvent être appliquées à des objets 3D créés dans Blender ou importés dans l’application.

Dans ce guide, nous verrons comment distinguer les types de suivi, résoudre le mouvement de caméra, orienter la scène et vérifier les erreurs de suivi dans le graphe. Les guides sources ne proposent pas de recette universelle adaptée à chaque prise de vue ; les étapes doivent donc être considérées comme une méthode de travail fondée sur les fonctions des outils.

Prérequis et informations sur la version

• Logiciel : Blender. Les sources sont les sections consacrées au suivi de mouvement du manuel en ligne de Blender.

• Version : Les pages du manuel ne précisent pas de version particulière de Blender ; aucun menu ni changement propre à une version n’est donc décrit ici.

• Entrée : La vidéo à suivre. Si les paramètres de caméra ou les données EXIF sont disponibles, la distance focale peut être récupérée à partir de ces informations.

• Compte et matériel : Les pages sources ne mentionnent aucune exigence de compte ni recommandation matérielle.

• Calibration facultative : L’outil de calibration de grille d’OpenCV peut être utilisé pour calibrer l’objectif plus précisément.

Pour résoudre correctement le mouvement de caméra, il est important de connaître la distance focale et la distorsion de l’objectif. Selon le manuel, la distance focale peut être récupérée automatiquement à partir des paramètres de caméra ou des données EXIF. Si ces informations ne sont pas disponibles, il faut évaluer la distorsion et vérifier le résultat du solve.

Étapes du suivi et de l’intégration dans la scène

1. Choisissez le type de mouvement à suivre

Commencez par déterminer le mouvement à résoudre dans l’image. Blender peut suivre le mouvement de caméra, celui d’un objet par rapport à la caméra et celui de marqueurs situés sur un même plan. L’outil Plane Track est prévu pour le suivi planaire.

Par exemple, suivre le mouvement d’un élément qui reste sur une surface fixe dans le plan n’est pas la même chose que placer un objet 3D dans la scène en fonction du mouvement de caméra. Choisissez la méthode en fonction du mouvement visible dans la prise de vue. Le manuel ne fournit pas de règle automatique indiquant quelle méthode choisir pour une scène donnée.

2. Examinez les données de suivi

Les outils de suivi de mouvement fonctionnent dans la section Tracking Mode de Movie Clip Editor. Le sélecteur de vue permet de passer d’une vue à l’autre pour examiner les données de suivi. Le manuel indique qu’il existe trois vues. Pour ouvrir séparément la vue des courbes ou le dope sheet, il faut diviser la zone de l’éditeur et régler l’une des zones sur la vue voulue.

Il est important d’examiner la position des marqueurs dans l’image, mais aussi leur évolution au fil des images. La vue des courbes permet d’évaluer le mouvement des pistes et les valeurs d’erreur. Si un marqueur se comporte de façon très différente des autres ou si la courbe de suivi présente un changement soudain, vérifiez cette portion de la séquence.

3. Résolvez le mouvement de caméra ou d’objet

Une fois les données de suivi préparées, lancez le solve caméra. Blender peut résoudre le mouvement de caméra ainsi que celui d’un objet par rapport à la caméra. Plane Track, quant à lui, traite le mouvement des marqueurs situés sur un même plan. Les données de suivi obtenues peuvent être utilisées dans une scène 3D.

Après le solve, vérifiez la relation entre l’image et la scène 3D. Les données de suivi peuvent être appliquées à un objet créé dans Blender ou importé dans l’application. Le manuel ne précise ni le nombre de marqueurs nécessaires pour chaque prise de vue, ni les valeurs de caméra exactes à utiliser. Évaluez donc chaque prise à partir de ses images et des résultats du solve.

4. Lisez le graphe d’erreur et repérez les images problématiques

Dans Graph View, les lignes rouge et verte indiquent la vitesse des marqueurs de suivi : le rouge représente le mouvement horizontal et le vert, le mouvement vertical. La ligne bleue visible après le solve caméra indique l’erreur moyenne par image. Elle ne peut pas être modifiée ; l’objectif est qu’elle reste aussi proche de zéro et aussi horizontale que possible. Des pics dans le graphe peuvent signaler une baisse de la précision du suivi dans les portions correspondantes de la prise de vue.

Les options d’affichage permettent de visualiser uniquement les graphes des marqueurs sélectionnés, les canaux des objets masqués ou l’erreur moyenne de reprojection par image. Si une courbe présente un pic soudain, examinez les données de suivi de l’image concernée. Le manuel précise que déplacer ou supprimer un point de la courbe affecte le marqueur de suivi correspondant à cette image.

5. Orientez la scène et stabilisez l’image

Après le solve, réglez l’orientation de la scène réelle dans l’espace 3D. Blender propose des outils permettant de définir le sol, l’origine de la scène et les axes X/Y. Ces opérations facilitent le réglage de l’orientation des éléments 3D à intégrer dans la scène.

Les prises de vue à main levée peuvent présenter des à-coups ou des mouvements de roulis. L’outil 2D Stabilization de Blender aide à détecter et compenser ces mouvements à partir des éléments suivis dans l’image. La stabilisation ne remplace pas l’examen des erreurs de suivi : vérifiez également les marqueurs qui semblent problématiques dans le graphe.

Erreurs fréquentes

• Ne pas tenir compte de la distorsion de l’objectif : La distance focale et le niveau de distorsion sont importants pour résoudre correctement le mouvement de caméra. La distance focale peut être récupérée à partir des paramètres de caméra ou des données EXIF.

• Ignorer les pics du graphe : Un pic soudain peut indiquer une erreur de suivi sur certaines images. Examinez les images et les marqueurs concernés un par un.

• Omettre l’orientation de la scène : Après le solve, définir le sol, l’origine et les axes aide à régler l’orientation de la scène dans l’espace 3D.

• Ne faire la calibration qu’à l’estimation : L’outil Annotation de Blender permet de tracer une ligne qui devrait être droite dans l’image, puis de régler les valeurs de distorsion pour qu’elles correspondent à cette ligne. Pour une calibration plus précise, le manuel recommande l’outil de calibration de grille d’OpenCV.

Étapes suivantes pour l’architecture et l’archviz

Ce workflow peut être utile aux équipes de visualisation et aux étudiants qui intègrent des éléments architecturaux 3D à des prises de vue. Le solve caméra permet de relier le modèle au mouvement de caméra dans l’image ; le suivi planaire sert à traiter le mouvement de marqueurs situés sur un même plan. Pendant le projet, il est important de vérifier les informations de caméra et d’objectif, puis d’examiner le graphe d’erreur après le solve.

La licence CC BY-SA 4.0 des pages du manuel n’est pas la même que celle du logiciel Blender ; les sources ne fournissent pas d’informations sur les conditions de licence du logiciel. Les bureaux et les étudiants doivent vérifier séparément la licence du logiciel. Les sources ne précisant pas non plus les exigences matérielles, il n’est pas possible de recommander une configuration informatique particulière. Avant de commencer, vérifiez la compatibilité de la version de Blender utilisée avec le manuel ainsi que les conditions de licence de votre organisation.

Sources et licence

Ce guide est une adaptation en turc des informations figurant sur les pages « Introduction » et « Graph View » du manuel en ligne de Blender. Les deux pages sources sont publiées sous licence CC BY-SA 4.0.