ZeST ist ein trainingsfreier Ansatz zur Übertragung von Materialien von einem Beispielbild auf ein Objekt in einem Eingangsbild. Das Verfahren nutzt bestehende Diffusionsadapter, um eine implizite Materialrepräsentation aus dem Beispielbild zu extrahieren. Diese Repräsentation wird verwendet, um das Material unter Verwendung eines vortrainierten Inpainting-Diffusionsmodells auf das Objekt im Eingangsbild zu übertragen, wobei Tiefenschätzungen als geometrische Hinweise und Graustufen-Objektschattierung als Beleuchtungshinweise verwendet werden. Das Verfahren funktioniert bei Echtzeitbildern ohne jedes Training, was einen nullschussartigen Ansatz ermöglicht. Sowohl qualitative als auch quantitative Ergebnisse auf realen und synthetischen Datensätzen zeigen, dass ZeST fotorealistische Bilder mit übertragenen Materialien erzeugt. ZeST kann auch verwendet werden, um mehrere Bearbeitungen durchzuführen und eine robuste Materialzuweisung unter verschiedenen Beleuchtungsbedingungen zu erreichen.
To Another Language
from source content
arxiv.org
Głębsze pytania