核心概念
Durch die Konstruktion eines Textur-Vokabulars und die Verknüpfung von Körperhaltungen mit Texturkarten können realistische und animierbare menschliche Avatare aus Mehrfachansicht-Videoaufnahmen erstellt werden.
要約
Die Methode TexVocab nutzt Mehrfachansicht-Videoaufnahmen, um zunächst Texturkarten im SMPL-UV-Bereich zu erstellen. Anschließend wird ein Textur-Vokabular konstruiert, indem Schlüsselposen und zugehörige Texturkarten zugeordnet werden. Anders als bisherige Ansätze, die Posen gelenkweise verarbeiten, zerlegt TexVocab die SMPL-Skelette in Körperteile und modelliert so die strukturellen Auswirkungen der kinematischen Kette explizit.
Für eine gegebene Ansteuerpose werden die Körperteile hierarchisch abgefragt, die zugehörigen Texturmerkmale interpoliert und schließlich in einem neuronalen Radiance-Feld-Modell zur Synthese der dynamischen Menschendarstellung genutzt. Die Experimente zeigen, dass TexVocab detailliertere und realistischere Avatare im Vergleich zu anderen Methoden erzeugen kann.
統計
Die Körperhaltungen werden in 5 Körperteile zerlegt, die jeweils eine bestimmte Menge an Gelenken enthalten.
Die Distanz zwischen zwei Körperteilen wird als Summe der Abstände der einzelnen Gelenkrotationen berechnet.
引用
"Anders als bisherige Ansätze, die Posen gelenkweise verarbeiten, zerlegt TexVocab die SMPL-Skelette in Körperteile und modelliert so die strukturellen Auswirkungen der kinematischen Kette explizit."
"Für eine gegebene Ansteuerpose werden die Körperteile hierarchisch abgefragt, die zugehörigen Texturmerkmale interpoliert und schließlich in einem neuronalen Radiance-Feld-Modell zur Synthese der dynamischen Menschendarstellung genutzt."