Technologie

Was machen wir eigentlich?

Danke für die Frage! Wir erstellen fotorealistische 3D Modelle von frei wählbaren Szenen – also quasi „echte 3D Fotos“! Wir nutzen dazu 85 Kameras die wir rund um ein Motiv aufbauen. Wir wollen so viele Fotos aus so vielen Perspektiven wie möglich machen können, um aus diesen Fotos im Anschluss ein 3D Modell im Computer zu berechnen. Das Ganze basiert nicht auf Künstlicher Intelligenz, es wird also nichts „dazuerfunden“. Die Modelle werden von Programmen berechnet und sind echte Dokumente die die Wirklichkeit abbilden. Da die Kameras alle miteinander synchronisiert sind können wir auch schnelle Bewegungen fotografieren und diese als Momentaufnahmen aus allen Winkeln betrachtbar machen. Die resultierenden 3D Modelle kann man im Anschluss als Basis für Videoclips, Animationen aller Art, interaktiven Content und im Zuge des immersiven Internets in Zukunft für jede Menge weitere Use Cases nutzen.

Das Setup

Das Ziel bei der Entwicklung des Kamera-Setups war es, sowohl in Studioumgebungen als auch on location möglichst modular und transportabel zu bleiben. Leichter gesagt als getan bei der nötigen Menge an Technik, Kabeln und jeder Menge Kleinteilen die mithelfen, alles an Ort und Stelle zu halten. Entsprechend ist das Rig seit Anfang 2023 durch einige Test- und Experimentiervarianten gegangen. Anfangs noch als reines Bullettime Setup konzipiert (der berühmte MATRIX Spezialeffekt, bei dem eine Kamerafahrt um eine eingefrorene Szene herum stattfindet) sind die Anforderungen an den Aufbau dann stetig parallel zu den Möglichkeiten gewachsen.

Mittlerweile ist das Kamera-Rig auf einem Stand der es uns ermöglicht flexibel auf schwierige Untergründe, bestimmte Voraussetzungen vor Ort oder auch sicherheitsrelevante Besonderheiten einzugehen. Montiert auf extra für unsere Zwecke gebogenen Aluminiumschienen können wir die Kameras flexibel um ein Motiv herum aufbauen. Beliebte Konfigurationen sind z.B. der Vollkreisaufbau mit einem Durchmesser von sechs Metern, oder auch der 180 Grad Halbkreisaufbau mit 12 Metern Durchmesser. Aktuell sorgen 85 Canon 2000D DSLR-Kameras, synchronisiert durch ESPER Triggerboxen, für eine nahezu lückenlose Abdeckung von allen Seiten. Dabei können die Cams sowohl auf einer Ebene verteilt werden um eine möglichst dichte horizontale Abdeckung zu ermöglichen, für eine von allen Seiten umfassende Abdeckung ist aber genau so gut ein Aufbau in mehreren Ebenen machbar.

3D/4D Gaussian Splatting

Softwareseitig basieren unsere 3D und 4D Modelle auf dem aktuell in der 3D Szene in aller Munde befindlichen Gaussian Splatting. Hierbei handelt es sich um eine Szenen-Rekonstruktionsmethode, die aus vielen 2D Fotos eines Motivs (hierbei ist es ganz egal ob es sich um eine Landschaft, ein Objekt, einen Menschen, ein Tier oder was auch immer handelt) ein dreidimensionales Modell erstellt, das im Anschluss von allen Seiten betrachtet werden kann. Die Modelle können danach freigestellt, mit anderen Modellen nach Belieben kombiniert und als Basis für Videoclips, Animationen, immersiven Content etcpp. genutzt werden!