Blender-Kameratracking: Clips verfolgen, lösen und Tracks bereinigen

Was Sie in dieser Anleitung lernen

Blenders Clip-Tracking-Werkzeuge verfolgen die Position bestimmter visueller Merkmale über die Frames einer Bildsequenz hinweg. Die so entstehenden Tracks können für ein Kamera- oder Objektbewegungs-Solve verwendet werden. Diese Anleitung behandelt die Auswahl der Tracking-Einstellungen, das Erkennen von Drift während des Trackings, die Bewertung der Solve-Parameter und das Bereinigen problematischer Tracks.

Die Blender-Dokumentation beschreibt allgemeine Werkzeuge für Clip-Tracking und Szenenbearbeitung; einen speziellen Workflow für Architektur oder Innenraumproduktion legt sie nicht fest. Teams für Architekturvisualisierung, die reale Aufnahmen zusammen mit einer 3D-Szene auswerten möchten, können die hier beschriebenen allgemeinen Werkzeuge dennoch in eigenen Projekten prüfen. Dabei handelt es sich um einen möglichen Anwendungskontext der Werkzeuge, nicht um eine in den Quellen bestätigte spezielle Methode.

Voraussetzungen

• Erforderlich sind eine Blender-Installation mit Clip-Tracking-Werkzeugen und ein Bildclip, der getrackt werden soll.

• Der Clip sollte visuelle Merkmale enthalten, die sich über die Frames hinweg unterscheiden lassen. Die Tracking-Einstellungen richten sich danach, wie sich der ausgewählte Punkt im Bild bewegt.

• Wenn Kameraparameter wie Brennweite oder optisches Zentrum optimiert werden sollen, sollten die Startwerte ungefähr stimmen. Laut Blender-Dokumentation kann der Solver möglicherweise keine korrekten Werte finden, wenn die Startwerte völlig falsch sind.

Die Quellen nennen weder eine bestimmte Blender-Version noch Anforderungen an Benutzerkonto oder Hardware. Leiten Sie daher keine zusätzlichen Anforderungen in diesen Bereichen ab, sondern prüfen Sie die Werkzeuge in der verwendeten Installation und die Bedingungen des Projekts separat.

Clip-Tracking und Solve Schritt für Schritt

1. Tracking-Punkte anlegen

Beginnen Sie damit, im Clip Merkmale zu finden, die sich über mehrere Frames hinweg verfolgen lassen. Blender bietet die Möglichkeit, Marker hinzuzufügen und Merkmale mit Detect Features zu erkennen. Prüfen Sie, ob sich die automatisch erkannten oder manuell angelegten Punkte über den Clip hinweg zuverlässig tracken lassen.

Die Voreinstellungen im Tracking-Einstellungsbereich bieten Startwerte, die auf Erfahrungen mit dem Tracking realer Aufnahmen beruhen. Verstehen Sie diese nicht als feste Vorgaben, die bei jedem Clip dasselbe Ergebnis liefern, sondern als Ausgangspunkt für den ersten Versuch. Pattern Size und Search Size legen die Größe des Pattern- und Suchbereichs für neu angelegte Tracks fest.

2. Ein Motion Model passend zur Bewegung des Merkmals auswählen

Das Motion Model legt fest, welche Arten von Änderungen der Tracking-Algorithmus bei einem Merkmal berücksichtigt. Neben Modellen, die nur die Positionsbewegung erfassen, gibt es Varianten, die auch Drehung und Skalierung einbeziehen, sowie Affine und Perspective. Berücksichtigen Sie bei der Auswahl, wie sich der getrackte Punkt im Bild verändert.

Für das Tracking eines ebenen Merkmals kann Perspective geeignet sein. Die Blender-Dokumentation weist jedoch auch darauf hin, dass Affine in manchen Fällen eine ausreichende Näherung und stabilere Tracks liefern kann. Gehen Sie nicht davon aus, dass eine Option für jeden Clip am besten geeignet ist, sondern prüfen Sie während des Trackings, ob die Marker auf den gewünschten Merkmalen bleiben.

3. Das Matching-Verhalten beurteilen

Die Einstellung Match beeinflusst, aus welchem Frame das beim Tracking verwendete Pattern stammt. Bei Keyframe dient das als Keyframe festgelegte Bild als Referenz für den Track. Das kann helfen, die ursprüngliche Pattern-Position beizubehalten. Ändert sich das Merkmal durch die Kamerabewegung jedoch deutlich, kann es zu kleinen Sprüngen oder Tracking-Abbrüchen kommen.

Bei Previous Frame wird der Track von einem Frame zum nächsten verfolgt. Das kann hilfreich sein, wenn sich das Merkmal zwischen Frames stark dreht; zugleich besteht das Risiko, dass seine Position mit der Zeit vom Zielpunkt abweicht. Kontrollieren Sie deshalb bei langen Tracks, ob der Marker weiterhin dem richtigen Merkmal folgt.

Prepass führt das Tracking in zwei Phasen durch: Zuerst wird die Position ermittelt, anschließend wird das erste Ergebnis mit einem umfassenderen Bewegungsmodell verbessert. Mit Copy from Active Track lassen sich die Einstellungen des aktiven Tracks auf einen anderen übertragen, um die Einstellungen mehrerer Tracks anzugleichen.

4. Licht- und Farbänderungen berücksichtigen

Normalize reguliert während des Trackings die durchschnittliche Intensität der Patterns und hilft so, den Einfluss von Beleuchtungsänderungen zu verringern. Die Option kann beispielsweise sinnvoll sein, wenn ein Punkt verfolgt wird, der im Bild durch den Schatten eines Objekts läuft. Mit den Einstellungen R, G und B wird festgelegt, welche Farbkanäle der Algorithmus verwendet. Das Deaktivieren einzelner Kanäle kann Merkmale deutlicher hervorheben.

Der Correlation-Wert legt die Mindestähnlichkeit fest, die für eine erfolgreiche Übereinstimmung erforderlich ist. Bricht das Tracking das Ziel zu früh ab, können Sie versuchen, den Wert zu senken; läuft der Track weiter, obwohl er vom Ziel abweicht, können Sie ihn erhöhen. Prüfen Sie das Tracking-Ergebnis nach der Änderung erneut im Bild.

Margin legt fest, an welcher Grenze das Tracking endet, wenn sich das Merkmal dem Bildrand nähert. Frames Limit bestimmt, über wie viele Frames ein Track Sequence ausgeführt wird. Kürzere Tracking-Abschnitte können es erleichtern, zwischendurch nach Drift zu suchen. Die Einstellung Speed verbessert nicht die Qualität des Ergebnisses, sondern steuert die Tracking-Geschwindigkeit, damit mögliche Abweichungen auffallen.

5. Das Kamera-Solve ausführen und die Einstellungen prüfen

Wechseln Sie nach dem Anlegen der Tracks zum Abschnitt Solve und den Werkzeugen für Kamera- und Objektbewegungs-Solves. Die Option Keyframe versucht, geeignete Frames für die erste Rekonstruktion automatisch auszuwählen. Keyframe A und Keyframe B bestimmen den Anfang und das Ende des für das Solve verwendeten Bereichs.

Mit den Refine-Optionen lassen sich Brennweite, optisches Zentrum, radiale Verzeichnung und tangentiale Verzeichnung optimieren. Das bedeutet nicht, dass bei völlig falschen Startwerten automatisch korrekte Werte gefunden werden. Ist das Ergebnis unerwartet, prüfen Sie die Startwerte und die Qualität der Tracks erneut.

Tripod ist ein spezieller Solver für Aufnahmen, bei denen sich die Kamera nicht verschiebt, sondern nur dreht. Diese Methode löst die relative Kameradrehung und projiziert die Merkmalspunkte so auf eine Kugel zurück, als wären sie gleich weit von der Kamera entfernt. Laut Blender-Dokumentation führt eine größere Anzahl von Tracks bei diesem speziellen Solve nicht automatisch zu einem genaueren Ergebnis; 5–10 Tracks pro Frame können eine gängige Wahl sein.

6. Problematische Tracks bereinigen und die Szenenausrichtung festlegen

Die Einstellung Frames im Abschnitt Cleanup dient dazu, Tracks oder Track-Segmente auszusortieren, die kürzer als die festgelegte Frame-Anzahl sind. Mit dem Error-Schwellenwert lassen sich Tracks finden, deren Reprojektionsfehler über dem festgelegten Wert liegt. Sie können problematische Tracks auswählen, den gesamten Track löschen oder nur fehlerhafte Segmente entfernen. Prüfen Sie das Solve nach der Bereinigung erneut; das Aussortieren von Tracks allein garantiert keine korrekte Kameralösung.

Die Orientation-Werkzeuge helfen bei der Ausrichtung und Skalierung der Szene. Die Blender-Dokumentation nennt neben Floor, Wall, Set Origin und Set X/Y Axis auch die Funktionen Set Scale und Apply Scale. Der für Set/Apply Scale verwendete Distance-Wert wird in den aktiven Szeneneinheiten angegeben. Berücksichtigen Sie daher die Einheiten der Szene, wenn Sie die Skalierung festlegen.

Anwendung in Architektur und Visualisierung

Die Quellen beschreiben keinen speziell auf Architekturprojekte zugeschnittenen Anwendungsablauf. Ein Team, das reale Aufnahmen zusammen mit einer 3D-Szene auswertet, kann die Tracking- und Kamera-Solve-Werkzeuge jedoch im eigenen Workflow erproben. In einem solchen Einsatz sollten die Stabilität der Tracks, die Kameraparameter und der Szenenmaßstab separat geprüft werden. Die in der Blender-Dokumentation beschriebenen Funktionen garantieren weder ein bestimmtes architektonisches Ergebnis noch Maßgenauigkeit.

Häufige Fehler

• Gehen Sie nicht davon aus, dass sich für jeden Tracking-Punkt dasselbe Motion Model eignet; beurteilen Sie Bewegung und Formänderungen des Punkts.

• Erwarten Sie nicht, dass das Matching mit Keyframe bei jeder Bildänderung problemlos funktioniert; ändern sich Formmerkmale, kann das Tracking abbrechen.

• Nehmen Sie bei einem Tripod-Solve nicht an, dass mehr Tracks das Ergebnis zwangsläufig verbessern.

• Verwenden Sie Refine nicht mit völlig falschen initialen Kamerawerten.

• Lassen Sie lange Tracks nicht unbeaufsichtigt; kontrollieren Sie den Verlauf regelmäßig, um Drift zu erkennen.

Nächste Schritte

Bestimmen Sie zunächst die trackbaren Merkmale im Clip. Vergleichen Sie anschließend die Bewegungsmodelle und Match-Optionen und beobachten Sie, wie sich die Tracks verhalten. Bei Licht- oder Farbänderungen können Sie Normalize und die Kanaleinstellungen prüfen. Bereinigen Sie nach dem Kamera-Solve fehlerhafte Tracks und kontrollieren Sie zuletzt die Ausrichtung und Skalierung der Szene.

Quellen und Lizenz

Diese Anleitung wurde anhand der Blender-Manual-Dokumentation zu „Track“ und „Solve“ ins Türkische übertragen. Beide Dokumente werden unter der Lizenz CC BY-SA 4.0 veröffentlicht.