본 연구는 생성 모델의 스타일 모방을 방지하기 위한 새로운 접근법인 Impasto를 제안한다. Impasto는 인간의 시각적 민감도를 고려한 보호 방법과 다양한 지각적 제약 조건을 활용하여, 보호된 이미지의 품질을 크게 향상시킨다.
구체적으로 Impasto는 다음과 같은 핵심 내용을 포함한다:
지각 인지 기반 보호 (Perception-Aware Protection, PAP): 인간의 시각적 민감도를 반영하는 지각 맵을 구축하여, 덜 눈에 띄는 영역에 더 강한 보호를 적용한다. 이를 통해 보호된 이미지의 품질을 크게 향상시킨다.
지각적 제약 조건 뱅크: LPIPS, 저주파 제약, CLIP 등 다양한 지각적 제약 조건을 활용하여 보호된 이미지의 시각적 품질을 추가로 향상시킨다.
인스턴스 기반 지각 맵 최적화: 각 이미지의 고유한 특성을 반영하도록 지각 맵을 개별적으로 최적화하여, 보편적인 접근법보다 우수한 성능을 달성한다.
실험 결과, Impasto는 기존 방법 대비 보호 성능은 유지하면서도 보호된 이미지의 품질을 크게 향상시켰다. 또한 다양한 회피 기법에 대해서도 강건한 성능을 보였다. 이를 통해 Impasto가 실제 응용 분야에서 효과적으로 활용될 수 있음을 확인하였다.
إلى لغة أخرى
من محتوى المصدر
arxiv.org
الرؤى الأساسية المستخلصة من
by Namhyuk Ahn,... في arxiv.org 03-29-2024
https://arxiv.org/pdf/2403.19254.pdfاستفسارات أعمق