이 논문은 단일 재료 예시 이미지를 사용하여 입력 이미지의 객체에 재료를 전송하는 제로샷 접근 방식인 ZeST를 제안합니다. ZeST는 기존 확산 어댑터를 활용하여 재료 예시 이미지에서 암시적 재료 표현을 추출하고, 이를 사용하여 깊이 추정 및 회색조 객체 음영을 단서로 사용하여 사전 학습된 복원 확산 모델을 통해 입력 이미지의 객체에 재료를 전송합니다. 이 방법은 어떠한 학습도 필요 없이 실제 이미지에 적용할 수 있어 제로샷 접근 방식입니다. 실제 및 합성 데이터셋에 대한 정성적 및 정량적 결과는 ZeST가 사실적인 이미지를 출력하며 전송된 재료를 정확하게 반영한다는 것을 보여줍니다. 또한 ZeST를 사용하여 여러 편집을 수행하고 다양한 조명 하에서 견고한 재료 할당을 수행할 수 있음을 보여줍니다.
To Another Language
from source content
arxiv.org
Viktige innsikter hentet fra
by Ta-Ying Chen... klokken arxiv.org 04-10-2024
https://arxiv.org/pdf/2404.06425.pdfDypere Spørsmål