Varjo hat Varjo Teleport veröffentlicht, eine neue App, mit der Sie ganz einfach einen detaillierten 3D-Scan einer Umgebung mithilfe eines iPhones oder iPads erstellen können.

Mit dieser App wird jeder Arbeitsbereich zu einem immersiven Erlebnis.

Immersion hatte die Gelegenheit, Teleport vor der Veröffentlichung zu testen und seinen Showroom zu scannen.

Varjos vereinfachtes Scannen

Varjo, der finnische Hersteller von Virtual-Reality-Headsets, hat eine neue Anwendung mit dem Namen Varjo Teleport auf den Markt gebracht.
Varjo Teleport ist ein innovativer Service, mit dem reale Orte ganz einfach in immersive virtuelle Erlebnisse verwandelt werden können. Durch die einfache Verwendung eines iPhones können die Nutzer eine Umgebung innerhalb weniger Minuten scannen, ohne dass eine spezielle Ausrüstung oder eine umfassende Schulung erforderlich ist.
Diese Bilder werden dann über den AWS-Service sicher in die Cloud hochgeladen, wo sie die Rekonstruktion einer immersiven Umgebung durch eine Mischung aus Rekonstruktions- und KI-Techno ermöglichen.
Diese Methode macht komplexe manuelle Bearbeitungen überflüssig und ermöglicht eine verblüffend realistische Rekonstruktion von Räumen, einschließlich Beleuchtung, Schatten und Reflexionen.
Die Technik, die zur Rekonstruktion der Umgebung verwendet wird, heißt Gaussian Splatting und ist eine KI-basierte Technologie.
Bei Immersion hatten wir die Gelegenheit, Teleport vor der Veröffentlichung zu testen.
Unser Spielplatz? Unser Showroom.

Was ist Gaussian Splatting?

Gaussian Splatting ist eine innovative Methode, um 3D-Szenen mit natürlicher Beleuchtung, präzisen Schatten und naturgetreuen Texturen und Reflexen realistisch nachzubilden. Diese Technik beruht auf der Aufnahme einiger Fotos oder Videos aus verschiedenen Winkeln, die in hochwertige Bilder umgewandelt werden.

Der Prozess beginnt mit der Erzeugung einer Punktwolke, die die Szene darstellt. Jeder Punkt wird dann in einen „Gaußschen Fleck“ umgewandelt: eine Ellipse, deren Farben von der Mitte zu den Rändern hin allmählich schwächer werden, indem sie einer Gaußschen Kurve folgen. Mithilfe von Machine-Learning-Algorithmen werden die Parameter dieser Flecken (Größe, Farbe, Deckkraft usw.) optimiert, um die Szene mit bemerkenswerter Qualität und Genauigkeit wiederzugeben.

Bei Lösungen wie Varjo Teleport wird diese komplexe Verarbeitung vollständig in der Cloud durchgeführt. Sobald die Szene rekonstruiert ist, kann die Umgebung direkt über einen Browser oder durch vollständiges Eintauchen mit einem Headset für virtuelle (VR) oder gemischte (XR) Realität erkundet werden. Dieser Ansatz verändert die Art und Weise, wie Räume und Umgebungen erfasst, visualisiert und geteilt werden können.

Die Vorteile und Grenzen des Gaussian Splatting

Unser Experte erläutert die Vorteile und Grenzen des Gaussian Splatting.

Vorteile:

Gaussian Splatting hat mehrere Vorteile gegenüber anderen 3D-Modellierungstechniken wie Photogrammetrie oder Neural Radiance Fields (NeRF: Neuronale Strahlungsfelder).

Zunächst einmal benötigt sie weniger Rechenressourcen, wodurch sie mit weniger leistungsfähiger Hardware einsetzbar ist und gleichzeitig eine größere Anzahl von Bildern verarbeiten kann. Dies macht sie zu einer idealen Lösung für Echtzeitanwendungen und realistische Szenen in der VR.

Die "Gaußschen Flecken" verfügen über einen Transparenzparameter, wodurch Materialien mit unterschiedlicher Opazität genau wiedergegeben werden können.

Außerdem bietet es eine hervorragende Wahrnehmung von Entfernungen, wodurch der Realismus und das Eintauchen in die Szenen verstärkt werden.

Grenzen:

Diese Technik hat jedoch noch einige Einschränkungen, insbesondere das Auftreten von Artefakten, Unschärfe oder Geisterbildern, die besonders deutlich werden, wenn man sich von den ursprünglichen Aufnahmepositionen entfernt.

Darüber hinaus bleibt die Interaktivität sehr eingeschränkt. Im Gegensatz zur Photogrammetrie oder NeRF erzeugt das Gaussian Splatting keine 3D-Netzwerke oder einzelne Objekte. Dies schränkt die Möglichkeiten ein, Elemente der Umgebung zu manipulieren, wie etwa zu verschieben, zu vergrößern oder anderweitig zu interagieren.
Davon abgesehen ist Gaussian Splatting eine Technik, die ständig weiterentwickelt wird, und diese Einschränkungen, insbesondere in Bezug auf die Interaktivität, werden allmählich behoben. Es ist daher wahrscheinlich, dass dieses Problem in Zukunft verschwinden wird.

Was ist der Nutzen für digitale Zwillinge?

"Dank Teleport war die Erstellung von digitalen Zwillingen noch nie so einfach und qualitativ hochwertig. Durch die Kombination dieser Technologie mit unserer Lösung Shariiing XR bieten wir eine immersive und kollaborative Erfahrung, die die Art und Weise, wie virtuelle Umgebungen geteilt und erforscht werden, neu definiert." Julien Castet, Direktor für Innovation und Forschung bei Immersion.

Für die digitalen Zwillinge wird das Interesse :

◼ Generierungsgeschwindigkeit: nahezu sofortige Darstellungen, entscheidend für sich ständig verändernde Umgebungen

◼ Anwendungsflexibilität: dies ermöglicht die Integration von Echtzeitdaten bei gleichzeitiger Ressourcenoptimierung

◼ Visuelle Qualität: hochrealistische Renderings, unverzichtbar für Verwendungszwecke wie vorausschauende Wartung oder immersive Schulungen.

Gaussian Splatting wird den Einsatz und die Aktualisierung der digitalen Zwillinge erleichtern, insbesondere für komplexe Umgebungen wie Fabriken oder städtische Infrastrukturen.

Fazit:

Mit Varjo Teleport wird das 3D-Scannen nicht nur zugänglich, sondern auch intuitiv. Dank Technologien wie Gaussian Splatting ist dieser Prozess, der früher nur Experten vorbehalten war oder komplexe Geräte erforderte, nun für jedermann mit einem einfachen Smartphone möglich.

Als wir diese Innovation in unserem Showroom getestet haben, konnten wir sehen, wie sie physische Räume in immersive virtuelle Erlebnisse verwandelt. Varjo Teleport ebnet den Weg für eine neue Ära in der Modellierung und gemeinsamen Nutzung von Umgebungen.

Stellen Sie sich also die Möglichkeiten vor: Was wäre, wenn Sie die Welt um sich herum einfangen und sie im Handumdrehen neu erfinden könnten? Die Zukunft der virtuellen Realität beginnt hier.