Immersives Echtzeit-Tracking in HMD oder volumetrischem Raum — Headset oder Raumkamera erfasst Bewegungen. Szenario-Grundlage für VFX-Tests, Location-Scouts und LED-Walls im Studio.
Virtual Reality am Set funktioniert völlig anders, als die meisten denken. Es geht nicht primär um Brillen für die Zuschauer — es geht um Echtzeit-Tracking und Raumerfassung während der Produktion. Du sitzt im Regiestuhl, trägst ein HMD (Head-Mounted Display) oder stehst im volumetrischen Raum, den eine Array von Infrarotkameras erfasst, und siehst sofort, wie deine geplante Kamerafahrt durch ein virtuelles Environment aussieht. Die Latenz muss unter 20 Millisekunden liegen, sonst wird dir schlecht.
Die praktische Anwendung hat drei Säulen: Erstens Pre-Visualization — du testest Blocking, Kamerabewegungen und Schnittfolgen, bevor auch nur eine echte Crew mobil wird. Das spart Tage an Drehzeit. Zweitens Location-Scouting in Virtual Spaces — wenn eine Location zu teuer oder inaccessible ist, baust du sie in Engine (Unreal, Unity) nach, navigierst durch sie, findest Blickwinkel. Drittens Live-Compositing auf LED-Walls: Der Hintergrund folgt deiner echten Kamera in Echtzeit, weil ein Motion-Capture-System (OptiTrack, Vicon) deine Bewegungen erfasst und an die Engine sendet. Das ist nicht nur effizient — es gibt der Crew echtes Licht von vorne, echte Spiegellungen im Auge der Schauspieler.
Am Set selbst siehst du drei Szenarien: Das VR-Previs-Setup arbeitet typischerweise mit einem einzelnen HMD und einem Tracking-Suit. Der Regisseur oder DP bewegt sich im Studio, während Infrarot-Marker auf Schultern, Armen und dem Kopf seine Position dreidimensional erfassen — zehn bis zwölf Kameras ringsum. Das Output-Signal geht direkt in die VR-Engine. Problematisch wird es nur bei Outdoor-Locations oder wenn natürliches Licht die Marker überstrahlt. Das zweite Szenario ist das volumetrische Setup: statt HMD trägst du nichts, dafür filmt dich ein Array von 4K-Kameras aus allen Winkeln ab. Die Software photogrammetrisiert dich in Echtzeit, du wirst zur dreidimensionalen Punktwolke. Das ist Gold für VFX-Tests — du kannst einen Actor von überall beleuchten, rotieren, resizen.
Das dritte ist das LED-Wall-Tracking: Die echte Kamera (RED, ARRI) hat Marker oder einen Sensor, der an Motion-Capture-System gebunden ist. Während du schwenkst und fährst, sendet das System permanent Position und Rotation an die Engine auf der LED-Wall hinter den Schauspielern — der Hintergrund parallaxiert korrekt. Dafür brauchst du ein absolut stabiles Sync zwischen Kamera, Tracking und Engine: ±2-3 Frames Versatz und die Illusion bricht. Der Ton läuft parallel — Produktionsleitung und DIT müssen hardwareseitig synchronisieren.
Die Kosten sind erheblich: Equipment, Engine-Lizenz, technischer Support vor Ort — schnell 50.000 Euro pro Drehtag. Es rechnet sich nur für größere Projekte, Serien oder Studios mit wiederholtem Bedarf. Für ein Feature-One-off, wo Locations authentisch sind, ist es oft Spielerei.