Varjo a lancé Varjo Teleport, sa nouvelle application qui permet de réaliser très simplement un scan 3D détaillé d’un environnement à l’aide d’un simple Iphone ou Ipad.
Grâce à cette application, n’importe quel espace de travail se transformera en une expérience immersive.
Immersion a eu l’opportunité de tester Teleport en amont de son lancement et de scanner son showroom, découvrir la suite dans cet article. 

La numérisation simplifiée de Varjo

Varjo, le fabricant finlandais de casques de réalité virtuelle, a lancé une nouvelle application nommée Varjo Teleport.
Varjo Teleport est un service innovant qui permet de transformer facilement des lieux réels en expériences virtuelles immersives. En utilisant simplement un iPhone, les utilisateurs peuvent scanner un environnement en quelques minutes, sans nécessiter d'équipement spécialisé ni de formation approfondie.
Ces images sont ensuite téléchargées de manière sécurisée sur le cloud grâce au service d’AWS, d'après le fabriquant Varjo, où elles permettent la reconstruction d’un environnement immersif grâce à un mélange de techno de reconstruction et d’IA.
Cette méthode élimine le besoin de traitements manuels complexes et permet de recréer des espaces avec un réalisme saisissant, y compris les éclairages, ombres et reflets.
La technique utilisée pour reconstruire l’environnement s’appelle le Gaussian Splatting, technologie basée sur l’IA.
A Immersion, nous avons eu l’opportunité de tester Teleport en amont de son lancement.
Notre terrain de jeu ? Notre showroom.

Qu'est-ce que le Gaussian Splatting ?

Le Gaussian Splatting est une méthode innovante qui permet de recréer des scènes en 3D avec un réalisme saisissant, intégrant un éclairage naturel, des ombres précises, ainsi que des textures et des reflets d’une grande fidélité. Cette technique repose sur la capture de quelques photos ou vidéos prises sous différents angles, transformées en images de haute qualité.
Le processus débute par la génération d’un nuage de points représentant la scène. Chaque point est ensuite converti en une « tâche gaussienne » : une ellipse dont les couleurs s’atténuent progressivement depuis le centre jusqu’aux bords, en suivant une courbe gaussienne. Grâce à des algorithmes de machine learning, les paramètres de ces tâches (taille, couleur, opacité, etc.) sont optimisés pour restituer la scène avec une qualité et une précision remarquable.
Dans le cadre de solutions comme Varjo Teleport, ce traitement complexe est entièrement réalisé dans le cloud. Une fois la scène reconstruite, l’environnement peut être exploré directement via un navigateur ou en immersion totale avec un casque de réalité virtuelle (VR) ou mixte (XR). Cette approche modifie la manière dont les espaces et environnements peuvent être capturés, visualisés et partagés. 

Les avantages et les limites du Gaussian Splatting

Notre expert nous donne les avantages et les limites du Gaussian Splatting.

Avantages :

Le Gaussian Splatting présente plusieurs avantages par rapport à d'autres techniques de modélisation 3D, telles que la photogrammétrie ou les champs de rayonnement neuronal (NeRF : Neural Radiance Fields).
Tout d'abord, il nécessite moins de ressources de calcul, ce qui le rend utilisable avec du matériel moins performant tout en permettant de traiter un plus grand nombre d'images. Cela en fait une solution idéale pour des applications en temps réel et des scènes réalistes en VR.
Les "tâches gaussiennes" disposent d'un paramètre de transparence, ce qui permet de reproduire avec précision des matériaux à opacité variable.
Il offre également une excellente perception des distances, renforçant ainsi le réalisme et l’immersion dans les scènes.

Limites :

Cependant, cette technique présente encore certaines limites, notamment l'apparition d’artefacts, de flou ou d’images fantômes, qui deviennent particulièrement visibles lorsque l’on s’éloigne des positions initiales des prises de vue.
De plus, l’interactivité reste très restreinte. Contrairement à la photogrammétrie ou aux NeRF, le Gaussian Splatting ne génère pas de maillage 3D ni d’objets individuels. Cela limite les possibilités de manipulation des éléments de l’environnement, comme leur déplacement, leur agrandissement ou toute autre interaction.
Cela dit, le Gaussian Splatting est une technique en constante évolution, et ces limitations, notamment en matière d’interactivité, sont en train d’être progressivement résolues. Il est donc probable que ce problème disparaisse à l’avenir.  

Quel est l'intérêt pour les jumeaux numérique ? 

« Grâce à Teleport, la création de jumeaux numériques n'a jamais été aussi simple et de qualité. En combinant cette technologie avec notre solution Shariiing XR, nous offrons une expérience immersive et collaborative qui redéfinit la manière dont les environnements virtuels sont partagés et explorés. » Julien Castet, Directeur de l’Innovation et de la Recherche à Immersion.
Pour les jumeaux numérique, l’intérêt sera :
◼ Rapidité de génération : des représentations quasi-instantanées, cruciales pour des environnements en constante évolution
◼ Flexibilité d’application : cela permet d’intégrer des données en temps réel tout en optimisant les ressources
◼ Qualité visuelle : des rendus hautement réalistes, indispensables pour des usages comme la maintenance prédictive ou la formation immersive.
Le Gaussian Splatting facilitera le déploiement et la mise à jour des jumeaux numériques, notamment pour des environnements complexes tels que des usines ou des infrastructures urbaines. 

Conclusion :

Avec Varjo Teleport, la numérisation 3D devient non seulement accessible, mais aussi intuitive. Grâce à des technologies comme le Gaussian Splatting, ce processus autrefois réservé à des experts ou nécessitant des équipements complexes est désormais à la portée de tous, avec un simple smartphone.
En testant cette innovation dans notre showroom, nous avons pu constater à quel point elle transforme les espaces physiques en expériences virtuelles immersives. Varjo Teleport ouvre la voie à une nouvelle ère dans la modélisation et le partage des environnements.
Alors, imaginez les opportunités : et si vous pouviez capturer le monde qui vous entoure et le réinventer en un clin d'œil ? Le futur de la réalité virtuelle commence ici.