Explore the Grand Canyon!

Interaktives Virtuelles Studio

Das interaktive Set wurde für Demonstrationen am Studio5-Tag 2015 unter dem Motto „Route 5 - Discover your way!“ entwickelt. Der Studio5-Tag ist eine der Informationsveranstaltungen des Fachbereich Medien an der Hochschule Düsseldorf.

Das Set zeigt eine Plattform am Grand Canyon mit einer wunderschönen Aussicht, welche durch Panoramen realisiert wird. Es ist eindrucksvoll zu sehen, dass der virtuelle Raum sich nicht auf den real existierenden Raum (das Studio) beschränken muss, sondern große Weiten zeigen kann. Für eine stimmige Oberflächendarstellung der Plattform werden zum Teil über Shader eingesetzt, welche Environment Maps verwenden, sodass realistische Reflexionen entstehen.

Die Produktion wurde live durchgeführt, d.h. das Tracking, das Rendering und Compositing fanden in Echtzeit statt. Die Software zum Rendern wird im Rahmen einer Kooperation mit Vizrt Austria bereitgestellt.

Bei der Aufzeichnung kamen zwei manuell bediente Kamerasysteme zum Einsatz: Kamerarobotik (G-Track) und Jibarm (JanJib) von Egripment. Die Kamerabewegungen erzeugen eine Bewegungsparallaxe, durch die sich der Raum entfaltet und die Tiefe für den Zuschauer deutlich erfahrbar macht.

Das eigentliche Highlight der Produktion ist die Interaktion in Echtzeit. Hierfür wird das OpenStage System von Organic Motion eingesetzt, das 18 Kameras für bildbasiertes Tracking der Akteure verwendet. Dieses liefert Skelett-Daten der Akteure mit denen das virtuelle Set gesteuert wird.

Die Positionen der Personen werden verwendet u.a. um die Tiefenrelation für Verdeckung zwischen der virtuellen und realen Domain aufzulösen. Als Beispiel wird gezeigt wie eine Person um eine virtuelle Bank herumgeht. Daneben können Hände oder Füße Animationen starten (wenn eine Hand durch den Rauch bewegt wird, schaltet sich ein Licht an). An die Körperposition können graphische Objekte perspektivisch korrekt angeheftet werden (z.B. eine erläuternde Legende). Die Skelett-Daten lassen sich außerdem zum Steuern eines Avatars verwenden. Letztendlich ist eine vollständige Interaktion mit dem Set möglich, welches durch das Werfen eines virtuellen Rings demonstriert wird.