GoMAvatar nutzt eine neuartige Darstellung namens "Gaussians-on-Mesh" (GoM), die die Vorteile von Gaussian-Splatting und deformierbaren Netzen kombiniert. Durch Gaussian-Splatting wird eine hohe Renderingqualität und -geschwindigkeit erreicht, während das Netz eine kompakte, topologisch vollständige Darstellung des digitalen Avatars ermöglicht und die Artikulation durch Vorwärtskinematik erleichtert.
Der Renderingprozess von GoMAvatar zerlegt das Endergebnis in eine pseudo-Albedo-Karte, die durch Gaussian-Splatting erzeugt wird, und eine pseudo-Schattenkarte, die aus der Normalenkarte des Netzes abgeleitet wird. Dies ermöglicht die Erfassung von Beleuchtungseffekten, während die Effizienz beibehalten wird.
GoMAvatar kann aus einem einzelnen monokularen Eingangsvideo erstellt werden, ohne zusätzliche Trainingsdaten zu benötigen. Es übertrifft oder entspricht die Renderingqualität der besten monokularen Menschenmodellierungsalgorithmen, ist aber deutlich effizienter und kompakter im Speicherverbrauch.
翻譯成其他語言
從原文內容
arxiv.org
深入探究