Une expérience étonnamment réaliste

Chez Scanmotion-3D, nous explorons en permanence de nouvelles technologies afin de transposer le plus fidèlement possible la réalité sous forme numérique. Dans un essai récent, nous avons enregistré un palmier avec Gaussian Splatting – avec un résultat qui semble étonnamment réel.

Dès le premier coup d’œil, on pourrait croire que l’on voit une plante réelle : des structures de feuilles fines, une douce diffusion de la lumière et une profondeur que l’on ne connaît habituellement que dans la nature.

Qu’est-ce que l’éclatement gaussien ?

Le gaussian splatting est une méthode moderne d’acquisition et de représentation de contenus 3D.
Au lieu de reconstruire un objet sous forme de modèle polygonal comme dans la numérisation 3D classique, la scène est constituée de plusieurs millions de petits points semi-transparents («gaussiens»). Chaque point porte des informations sur la couleur, la position, la transparence et le comportement à la lumière.

Le résultat n’est pas un maillage rigide, mais une image volumétrique et photoréaliste qui peut être rendue en temps réel. C’est justement pour les structures organiques comme les plantes, les arbres ou les textiles que le gaussian splatting montre toute sa force.

Le défi : des plantes en mouvement

Un palmier est tout sauf un simple objet de test. Ses feuilles sont fines, mobiles et en partie translucides. Le moindre mouvement – par exemple un courant d’air – peut fausser la photo.

Les principales difficultés rencontrées lors de la saisie d’une plante sont les suivantes :

• 🌿 Mouvement : même un mouvement minime des feuilles entraîne des images fantômes ou un flou.

• 💧 Transparence & réflexion : les surfaces humides ou brillantes réfléchissent la lumière à des degrés divers.

• 🌱 S tructures fines : les fines nervures des feuilles et les ombres portées exigent une grande précision dans le calcul des nuages de points.

• 🌤️ Changements de lumière : Sous un éclairage naturel, les valeurs de couleur et les ombres changent en une fraction de seconde.

Malgré ces défis, il a été possible de photographier le palmier de manière à ce qu’il paraisse totalement vivant dans la représentation numérique.

Le déroulement technique

Pour la prise de vue test, le palmier a été enregistré sous différentes perspectives à l’aide d’appareils photo haute résolution.
Un nuage de points dense et aux couleurs exactes, comportant plusieurs millions d’entrées, a été créé à partir de ces données d’image par splatting gaussien.

Chaque point contient non seulement sa position, mais aussi des informations sémantiques sur le matériau et le comportement à la lumière – une approche également appelée 3D sémantique.

Grâce à un réglage fin et ciblé de la reconstitution – en particulier pour les gaussiens dans la partie supérieure de la couronne – la translucidité naturelle des feuilles a pu être reproduite de manière réaliste.

Le résultat :
Un modèle numérique de palmier qui, à première vue, ne se distingue pas d’une vraie plante – idéal pour les environnements virtuels, les visualisations ou la recherche dans le domaine de l’acquisition 3D proche de la réalité.

Pourquoi ce test 3D est important

Avec cet essai, nous voulions savoir dans quelle mesure le gaussian splatting pouvait être utilisé pour créer des scènes vivantes et naturelles.
Les résultats montrent que c’est possible : Cette technologie n’est pas seulement un outil de recherche, mais elle est prête à être utilisée de manière productive dans des domaines tels que

L’image test de notre palmier avec Gaussian Splatting le prouve :
Les objets naturels n’ont plus besoin d’être reconstruits laborieusement – ils peuvent être saisis directement sous forme de structure de nuage de points réaliste.

Ce qui n’était autrefois possible que dans la recherche est aujourd’hui techniquement praticable :
Une nouvelle forme d’expérience en 3D, où la nature, la lumière et la précision numérique se fondent sans transition.

Avec le Gaussian Splatting, la frontière entre la réalité et la perception numérique s’estompe.
Team Scanmotion-3D