이 논문은 테스트 시간 적응(TTA)을 위한 새로운 확산 기반 입력 업데이트 방법론인 Decorruptor를 제안한다. TTA는 테스트 시간에 발생하는 예기치 않은 분포 변화에 대처하는 것을 목표로 한다.
Decorruptor-DPM은 잠재 확산 모델(LDM)을 활용하여 효율적인 메모리 및 시간 활용을 달성한다. 또한 새로운 오염 모델링 기법을 통해 오염된 이미지를 효과적으로 복원할 수 있다. 이 기법은 깨끗한 이미지와 오염된 이미지의 쌍을 생성하고, 이를 활용하여 확산 모델을 미세 조정함으로써 오염된 이미지를 깨끗한 이미지로 편집할 수 있게 한다.
Decorruptor-CM은 Decorruptor-DPM을 가속화한 모델로, 일관성 증류를 통해 추론 시간을 크게 단축시킨다. 실험 결과, Decorruptor는 기존 확산 기반 접근법보다 100배 빠른 속도로 우수한 성능을 달성했다. 또한 데이터 증강 기반 모델 업데이트 기준선보다 3배 빠르고 성능이 우수하다.
翻譯成其他語言
從原文內容
arxiv.org
深入探究