Was ist der Unterschied zwischen Gaussian Splatting und NeRF?
Neural Radiance Fields, kurz NeRF, und 3D Gaussian Splatting lösen ein ähnliches Problem: Aus einer Sammlung von Bildern sollen neue Ansichten einer realen Szene erzeugt werden, die bei der ursprünglichen Aufnahme nicht direkt fotografiert wurden. Beide Verfahren gehören damit in den Bereich der Novel-View-Synthese. Technisch unterscheiden sie sich jedoch deutlich.
Wie funktioniert ein NeRF?
Ein klassisches NeRF beschreibt die Szene implizit über ein neuronales Modell. Für räumliche Positionen und Blickrichtungen wird berechnet, welche Dichte und Farbe dort zu erwarten sind. Um ein Bild zu erzeugen, wird die Szene entlang vieler Kamerastrahlen ausgewertet. Das kann sehr hochwertige Ergebnisse liefern, ist aber traditionell vergleichsweise rechenintensiv.
Wie funktioniert Gaussian Splatting?
3D Gaussian Splatting verwendet eine explizitere Repräsentation. Millionen räumlicher Gaussians besitzen Position, Form, Orientierung, Transparenz und Erscheinungsparameter. Beim Rendern werden diese Primitive sichtbarkeitsabhängig auf das Bild projiziert. Der ursprüngliche 3DGS-Ansatz wurde insbesondere durch seine Kombination aus hoher visueller Qualität und Echtzeitdarstellung bekannt.
Was bedeutet das praktisch?
Gaussian Splats lassen sich häufig direkter visualisieren, inspizieren und in Echtzeitanwendungen integrieren als klassische NeRF-Repräsentationen. Gleichzeitig entwickeln sich beide Technologiefamilien schnell weiter, und aktuelle Verfahren können Eigenschaften miteinander kombinieren oder Repräsentationen ineinander überführen.
Welches Verfahren ist für Museen besser?
Das lässt sich nicht pauschal beantworten. Entscheidend sind Ziel, vorhandenes Material, gewünschte Plattform und erforderliche Weiterverarbeitung. Für eine virtuelle Begehung eines realen Raumes kann Gaussian Splatting aufgrund der schnellen Darstellung attraktiv sein. Für ein dauerhaft editierbares historisches 3D-Modell sind weder NeRF noch Gaussian Splatting automatisch ein Ersatz für ein strukturiertes Mesh.
Wie sollte man die Begriffe kommunizieren?
Für Besucher ist die konkrete Technologie meist weniger wichtig als das Erlebnis. In einem Museumsprojekt sollte daher nicht „NeRF“ oder „Gaussian Splatting“ die Hauptbotschaft sein. Relevant ist vielmehr, ob eine digitale Aufnahme einen heutigen Zustand dokumentiert, ob eine historische Rekonstruktion gezeigt wird und welche Teile davon wissenschaftlich belegt oder interpretiert sind.