Planar Tracker Node

Le Planar Tracker résout un problème que le Tracker classique peine à traiter : suivre une surface plane qui subit des distorsions perspective. Au lieu de tracker des points individuels, il analyse le mouvement de toute une région et calcule une transformation perspective (homographie) à chaque frame.

Avantages : pas de keyframes manuels pour un corner pin, robustesse aux occlusions (via un mask), precision supérieure pour les surfaces inclinées (route, mur, écran TV), support des 4 modes d'opération.

Limitation notable : le Planar Tracker ne sauvegarde pas ses données de tracking temporaire (individual point trackers). Conséquence : tout le tracking doit être fait en une seule session — si on sauvegarde et on reprend, il faut retracker.

• Effects Library : Tools > Tracking > Planar Tracker
• Ajout rapide : clic droit dans le Node Editor → Add Tool > Tracking > Planar Tracker

Tracker classique

Track par pattern 2D. Pour points isolés, attachement simple, stabilisation rapide. Lent avec perspective, sensible aux rotations complexes.

Planar Tracker

Analyse planaire. Idéal pour surfaces entièresqui tournent/inclinent/se déplacent en perspective. Plus lent mais plus robuste dès qu'il y a de la perspective.

Camera Tracker

Différent : résout la caméra en 3D (pas un plan 2D). Pour intégrer du CGI 3D dans du live-action.

Règle : écran TV, panneau, plaque, bâche, poster → Planar. Point spécifique (œil, balle) → Tracker classique. Plan entier pour du 3D → Camera Tracker.

• Background (orange) — footage contenant la surface plane.
• Corner Pin 1 (vert) — foreground (image, texte) à appliquer sur la surface trackée avec distorsion perspective.
• Occlusion Mask (blanc) — mask des objets qui cachent partiellement la surface (main, bras, objet passant devant). Le tracker ignore ces zones pour ne pas dériver.
• Effect Mask (bleu) — limite la sortie à une zone.

Screen replacement :
MediaIn (plan avec écran) → Planar Tracker (Corner Pin) → Merge 2D
                                         ↑
                Text+ / Image ───────────┘ (FG à corner-piner)

Avec occlusion (main passant devant) :
MediaIn → Planar Tracker → Merge 2D
            ↑
Polygon (rotoscope main) → Occlusion Mask input

Track

Mode d'analyse. C'est ici qu'on lance le tracking sur la région sélectionnée.

Steady

Retire le mouvement du plan tracké. Utile pour faire du paint ou du roto « immobile » (on travaille sur une version sans mouvement), puis on peut unsteady pour réintégrer le mouvement original. Workflow pro pour enlever un objet.

Corner Pin

Applique la transformation perspective trackée sur le FG input. Mode standard pour le screen replacement.

Stabilize

Stabilise le plan en contre-appliquant le mouvement tracké. Choisir quels paramètres lisser (X/Y, rotation, scale) et le rayon de smoothing. Bords transparents à compenser avec Auto Crop ou Auto Zoom.

Le Planar Tracker peut modéliser la distorsion du plan avec différents niveaux de complexité. Choisir en fonction du mouvement réel dans le plan :

Translation

Seulement X/Y. Plan qui glisse sans tourner ni s'incliner.

Translation + Rotation

Plan qui peut tourner dans le plan image.

Translation + Rotation + Scale

Zoom / dezoom du plan en plus.

Affine

Ajoute le skew (cisaillement). Plan légèrement incliné.

Perspective

Le plus général. Supporte toutes les distorsions perspective (4 points libres). Choix par défaut.

Commencer à Perspective. Si le track dérive ou est instable, descendre vers un modèle plus simple (souvent Translation+Rotation+Scale suffit pour du footage calme).

1. Dégrader la distorsion optique de la footage source (Lens Distort node) — un tracking sur footage distordue donne de mauvais résultats.
2. Connecter la footage au background input.
3. Se placer sur une frame de référence où la surface plane est bien visible et non occluse.
4. Dessiner un polygon autour de la surface plane (le pattern). Plus large et distinctif possible.
5. Ajuster le render range pour couvrir la portion de plan à tracker.
6. Configurer Motion Type et Track Channel (R/G/B).
7. Connecter un Occlusion Mask si un objet passe devant la surface.
8. Lancer Track Forward depuis la frame de référence. Puis Track Backward pour compléter.
9. Vérifier visuellement le track frame par frame.
10. Changer le mode vers Corner Pin et connecter le FG pour le screen replacement.

La région polygon dessinée doit :

• Être grande — plus de pixels analysés = meilleur track.
• Rester entièrement visible pendant le tracking (pas sortir du cadre).
• Être non-occluse— sinon mask d'occlusion obligatoire.
• Être aussi grande que possible / subject — pas juste un petit rectangle au milieu du plan.
• Relativement plate et peu distordue — dessiner sur la surface qui ressemble le plus à un plan à cette frame.

• Screen replacement (écrans TV, téléphones) — polygon sur l'écran → Corner Pin → FG = UI custom ou vidéo → écran qui affiche le nouveau contenu en suivant parfaitement la perspective du plan.
• License plate replacement — polygon autour de la plaque → Text+ avec le nouveau numéro → corner pin automatique sur tous les frames.
• Sign / poster replacement— remplacer un panneau publicitaire, un logo d'entreprise par un autre sans refaire le plan.
• Paint / roto stabilisé (Steady mode) — passer en Steady → peindre pour enlever un objet sur le plan immobile → revenir en mode normal pour réintégrer le mouvement.
• Stabilisation de caméra shakée — mode Stabilize avec smoothing, pour lisser un plan tourné à main levée sans figer totalement la caméra.
• Tattoo / graffiti application — image de tatouage → corner pin sur la peau (à condition qu'elle soit relativement plate).
• Projection mapping virtuel— corner pin d'une vidéo sur un mur ou une façade de bâtiment dans un plan.

• Point Tracker vs Hybrid — Point Tracker est plus rapide et gère les outliers auto. Hybrid (Point/Area) plus précis mais nécessite plus de masks d'occlusion. Commencer avec Point Tracker, passer Hybrid si dérive.
• Toujours corriger la lens distortion avant — footage GoPro ou grand-angle = lens distort marqué. Un Lens Distort node en amont résout la majorité des problèmes de track.
• Frame de référence au milieu du plan — tracker forward puis backward depuis cette frame = data plus cohérente qu'en partant du début.
• Tout en une seule session — rappel crucial : le tracking temporaire n' est pas sauvegardé. Planifier de faire le track + l'intégration complète sans fermer le projet.
• Auto Crop pour les bords en Stabilize — la stabilisation révèle des bords noirs. Auto Crop ou Auto Zoom recompense en zoomant légèrement (à réserver à une stab pas trop agressive, sinon perte de qualité).
• Bake to Planar Transform — une fois le track réussi, créer un node Planar Transform à partir des données (bake) pour un render plus rapide et portable.
• Pour des surfaces non planes (visage, tissu qui ondule), le Planar Tracker ne suffit pas. Utiliser un mesh warp tracké (Optical Flow, Motion Vector) ou des solutions tiers (Mocha Pro).