核心概念
단일 흐릿한 이미지에서 다중 선명한 이미지를 추출하기 위해 글로벌 셔터 카메라와 롤링 셔터 카메라의 상호보완적인 특성을 활용한다.
摘要
이 논문은 단일 흐릿한 이미지에서 다중 선명한 이미지를 추출하는 문제를 다룹니다. 일반적으로 이 문제는 매우 모호하기 때문에 주변 프레임 정보나 사용자 주석이 필요합니다. 이 논문에서는 롤링 셔터 카메라의 스캔라인 지연 특성을 활용하여 단일 흐릿한 이미지의 모션 분해를 강화하는 방법을 제안합니다.
논문의 주요 내용은 다음과 같습니다:
- 글로벌 셔터 카메라와 롤링 셔터 카메라의 상호보완적인 특성을 활용하여 단일 흐릿한 이미지의 모션 분해 문제를 해결하는 새로운 접근법을 제안합니다.
- 실제 데이터 수집을 위해 3축 이미징 시스템을 구축하고 RealBR 데이터셋을 구축했습니다.
- 모션 해석 모듈과 흐릿함 분해 모듈로 구성된 새로운 신경망 아키텍처를 제안했습니다. 모션 해석 모듈은 흐릿한 이미지와 롤링 셔터 이미지의 상호보완적인 특성을 활용하여 모션 필드를 추정합니다.
- 실험 결과를 통해 제안한 접근법의 효과성을 검증했습니다.
统计
단일 흐릿한 이미지에서 다중 선명한 이미지를 추출하는 문제는 매우 모호하여 주변 프레임 정보나 사용자 주석이 필요하다.
롤링 셔터 이미지는 스캔라인 지연 특성으로 인해 잠재 프레임의 시간적 순서를 암시적으로 인코딩한다.
글로벌 셔터 이미지는 초기 상태 모호성을 완화하는 데 도움이 될 수 있다.
引用
"Motion blur is a frequently observed image artifact, especially under insufficient illumination where exposure time has to be prolonged so as to collect more photons for a bright enough image."
"Rather than simply removing such blurring effects, recent researches have aimed at decomposing a blurry image into multiple sharp images with spatial and temporal coherence."
"Inspired by the complementary exposure characteristics of a global shutter (GS) camera and a rolling shutter (RS) camera, we propose to utilize the ordered scanline-wise delay in a rolling shutter image to robustify motion decomposition of a single blurry image."