本論文は、3D Gaussian Splattingにディファード・レンダリングを組み合わせることで、高品質な鏡面反射効果を実現する手法を提案している。
まず、Gaussian Splattingのパスでは、ベースカラー、ノーマル、反射強度などの情報をスクリーン空間のマップに書き込む。次に、ディファード・シェーディングのパスでは、ノーマルマップを使って反射方向を計算し、環境マップからその方向の反射色を取得する。最後に、ベースカラーと反射色を反射強度で重み付けして最終的な色を合成する。
ノーマルの推定が課題となるが、反射の強い Gaussianは正しいノーマルを持つことに着目し、ノーマルの伝播アルゴリズムを提案している。これにより、ノーマルの推定精度が向上し、環境マップの再構築精度も高まる。
提案手法は、既存手法と比較して一貫して高いPSNR、SSIM、LPIPSの値を示し、高品質な反射効果を実現している。また、学習時間と推論速度も既存手法と同等かそれ以上の性能を発揮する。
To Another Language
from source content
arxiv.org
Głębsze pytania