 |
Interaktives Virtuelles Studio - "Aquaboom" [EN]
Die Produktion wurde 2025/2026 im Rahmen des Modules „Interaktives Virtuelles Studio“ an der Hochschule Düsseldorf durchgeführt.
Ziel war es, Interaktionen mithilfe von markerlosem Personentracking umzusetzen und die Nutzung von generierten Gaussian Splats im virtuellen Studio zu erkunden.
In dieser Tech-Demo „Aquaboom“ berichtet eine Nachrichtenstation über das AquaDom in Berlin. Während der Berichterstattung bricht das Aquarium mit einem Taucher.
Die Grafiken wurden live mit Viz Artist 5 und Unreal 5 gerendert. Das markerlose Personentracking von Captury liefert Skelettdaten für den Taucher.
Ein Kameraflug für den Übergang zwischen Nachrichtenstudio und Hotel zeigt die Städte Düsseldorf und Berlin mithilfe von Cesium-Daten.
Der Hotelbereich wird mithilfe von Gaussian Splats dargestellt, die von Marble AI aus einem einzigen Bild generiert wurden.
Video
Download
| Beschreibung | Dauer | mp4 |
|---|
| Produktion "Aquaboom" 1080p50 | 3:13 Min | 319,9 MB >> |
| Making of "Aquaboom" 1080p50 | 6:32 Min | 333,2 MB >> |
Produktionsteam
Leitung: Jens Herder
Darsteller: Clara Caloy Alberto de Oliveira, Bilal Morsli, Felix Viering
Team:
Soren Ali,
Fauzan Yafi Ariansyah,
Dean Braband,
Clara Caloy Alberto de Oliveira,
Laura de Abreu Henriques,
Tobias Hejniak,
Kevin Kader,
Bastian Kämmerer,
Bilal Morsli,
Armin Muschallik,
Stefanos Stathakis,
Felix Viering,
Sui Yin Elisabeth Zhang,
Andi Zielecki
Support: Noah Ban, Christin Willscheid
Keywords
Virtual Studio, MoCap, Captury Live, Gaussian Splats, Interaction, Vizrt, Unreal
Credits
- Viz Artist 5 und Tracking Hub Software von Vizrt
- Unreal 5 - Epic Games, Inc.
- xverse 3DGS plugin - XVERSE Technology Inc.
- Cesium – Bentley Systems
- Marble - World Labs
- Camera tracking system - Egripment/Trackmen
- Markerless Motion Tracking - Captury Live
- Virtuelles Studio der Hochschule Düsseldorf, University of Applied Sciences
Produktionen
- Interaktives Virtuelles Studio - MoCap - "Bulletproof"
- Produktionen der HS Düsseldorf mit der Gameengine Unreal, 2022.
- Interaktives Virtuelles Studio - MoCap - Game show "Shocked and Stackedn
- Produktionen der HS Düsseldorf mit Viz Artist, 2021.
- Interaktives Virtuelles Studio - Markerlose Erfassung einer Person für Steuerung eines Moving Heads
- Produktionen der HS Düsseldorf mit der Gameengine Unreal, 2019.
- Interaktives Virtuelles Studio - Indiana Jones im Land der Studenten
- Produktionen der HS Düsseldorf mit der Gameengine Unreal, 2018.
- Mixed Reality Experience - Ein Einblick in die Virtuelle Realität unter Nutzung eines Virtuellen Studios
- Produktionen der HS Düsseldorf mit einem HMD, 2017.
- Praktikum Virtuelles Studio [2016] mit dem Thema VR
- Der Studiobetrieb wird im Praktikum Virtuelles Studio im Studiengang Medientechnik unterrichtet.
- Subtle Animations using Talent Tracking in a Virtual (TV) Studio
- Produktion im Virtuellen Studio der FH Düsseldorf, 2014.
- SpiderFeedback - seilwindengebundenes, visuelles Feedback im Virtuellen Studio
- Produktion im Virtuellen Studio der FH Düsseldorf, 2014.
- VRON: Virtual Reality over Networks - Die vier Stadien in einer digitalen Welt im Virtuellen Studio: Mensch, Cyborg, Avatar, Bot - Eine Virtuelle Studio-Produktion des Fachbereich Medien
- Produktion im Virtuellen Studio der Hochschule Düsseldorf, 2013.
- Markerloses Darsteller Tracking für Anwendungen im Virtuellen Studio
- Produktion im Virtuellen Studio der Hochschule Düsseldorf, 2013.
Veröffentlichungen
- A Lighthouse-based Camera Tracking System for Professional Virtual Studios
- Kai Vermeegen and Jens Herder, GI-VRAR, Workshop Proceedings / Tagungsband: Virtuelle und Erweiterte Realität – 15. Workshop der GI-Fachgruppe VR/AR, ISBN 978-3-8440-6215-1, Düsseldorf, pp. 19-26, Oktober, 2018.
- Mixed Reality Experience - How to Use a Virtual (TV) Studio for Demonstration of Virtual Reality Applications
- Jens Herder, Philipp Ladwig, Kai Vermeegen, Dennis Hergert, Florian Busch, Kevin Klever, Sebastian Holthausen, and Bektur Ryskeldiev, Proceedings of the 13th International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications - Volume 1: GRAPP,
Santa Cruz, Portugal, INSTICC, DOI=10.5220/0006637502810287, Januar 27-29, 2018.
- Comparison of two Gesture Recognition Sensors for Virtual TV Studios
- (with Marina Ballester Ripoll, Jens Herder, Philipp Ladwig, and Kai Vermeegen), GI-VRAR, Workshop Proceedings / Tagungsband: Virtuelle und Erweiterte Realität 13. Workshop der GI-Fachgruppe VR/AR, ISBN 978-3-8440-4718-9, Bielefeld, September, 2016.
- Four Metamorphosis States in a Distributed Virtual (TV) Studio: Human, Cyborg, Avatar, and Bot - Markerless Tracking and Feedback for Realtime Animation Control
- Jens Herder, Jeff Daemen, Peter Haufs-Brusberg, Isis Abdel Aziz. Four Metamorphosis States in a Distributed Virtual (TV) Studio: Human, Cyborg, Avatar, and Bot - Markerless Tracking and Feedback for Realtime Animation Control, In Virtual Realities, pp 16-32, Springer International Publishing, DOI=10.1007/978-3-319-17043-5_2,
ISBN 978-3-319-17042-8, April 1st, 2015.
- SpiderFeedback - Visual feedback for Orientation in Virtual TV Studios
- Jonathan Simsch and Jens Herder, 11th International Conference on Advances in Computer Entertainment, ACE 2014, Funchal, Portugal, November 11-14, 2014.
- Four Metamorphosis States in a Distributed Virtual (TV) Studio: Human, Cyborg, Avatar, and Bot
- Jose Burga, Jeff Daemen, Sascha Charlie Djuderija, Maren Gnehr, Lars Goossens, Sven Hartz, Peter Haufs-Brusberg, Jens Herder, Mohammed Ibrahim, Nikolas Koop, Christophe Leske, Laurid Meyer, Antje Müller, Björn Salgert, Richard Schroeder, and Simon Thiele, 10th International Conference on Visual Media Production (CVMP 2013), short paper, London, November, 2013.
- Markerless Actor Tracking for Virtual (TV) Studio Applications
- Jeff Daemen, Peter Haufs-Brusberg, and Jens Herder, International Joint Conference on Awareness Science and Technology & Ubi-Media Computing (iCAST 2013 & UMEDIA 2013), HC-2013 Track, Hamamatsu/Aizu-Wakamatsu/Duesseldorf, November, 2013.
Thesis
- Virtuelle Avatare im Virtuellen Studio unter Verwendung eines markerlosen Trackings für Körper und Gesicht
- Raoul Gödel, Bachelorarbeit, 2020
|
|
