Un méthode calcule la transparence en 3D Gaussian Splatting
La technique 3D Gaussian Splatting (3DGS) a révolutionné la façon d'optimiser et de visualiser les champs de radiance en temps réel. Cependant, son approche simplifiée pour mélanger les couleurs et calculer la densité présente un grand inconvénient : elle ne peut pas représenter correctement les objets semi-transparents qui se superposent de manière complexe. 🎯
Fermer l'écart entre la rasterisation et la physique réelle
Pour surmonter cette barrière, une extension du rendu basé sur la rasterisation a été proposée. Son objectif est de calculer la transmitance avec une grande fidélité, en se passant complètement de techniques coûteuses comme le traçage de rayons ou le tri des échantillons pour chaque pixel. Cela rapproche la vitesse de la rasterisation de la précision des méthodes physiques plus complexes.
Les fondements de la nouvelle approche :- Elle se base sur des recherches précédentes sur la transparence indépendante de l'ordre des échantillons.
- L'idée centrale est de décrire la distribution de densité le long de chaque rayon de caméra de manière compacte.
- Pour y parvenir, une représentation continue fondée sur des moments statistiques est utilisée.
Désormais, les objets transparents en 3DGS ne ressemblent plus à du verre sale vu à travers un autre verre sale.
Traitement des moments pour reconstruire la transmittance
La méthode dérive et traite de manière analytique un ensemble de moments pour chaque pixel. Ces moments sont générés à partir de toutes les gaussiennes 3D qui contribuent à ce pixel. Avec cette information, le système est capable de reconstruire une fonction de transmittance continue pour chaque rayon individuel, ce qui est clé pour modéliser l'atténuation de la lumière.
Implémenter la reconstruction :- La fonction de transmittance reconstruite est échantillonnée de manière indépendante au sein de chaque gaussienne 3D.
- Cette étape est cruciale pour modéliser avec précision comment la lumière s'atténue en traversant des milieux translucides avec des structures complexes.
- Le processus comble l'écart technique existant, améliorant substantiellement la qualité finale tant pour la reconstruction que pour la visualisation.
Résultat : Un saut en réalisme et en qualité
L'avantage principal de cette méthode est qu'elle surmonte les limitations du alpha blending simplifié utilisé par défaut dans 3DGS. Les objets semi-transparents cessent d'être perçus comme des couches planes et désordonnées, et montrent à la place la complexité physique qu'ils devraient avoir. Cela représente un progrès significatif pour rendre le rendu en temps réel non seulement rapide, mais aussi visuellement précis. ✨