Core Concepts
비디오 클립의 셔터 각도, 즉 노출 시간과 프레임 레이트의 비율을 추정하는 방법을 제안한다. 이 방법은 광학 흐름과 선형 흐림의 관계를 활용한다. 광학 흐름과 흐림 추정이 모두 신뢰할 수 있는 이미지 패치를 선택하여 일관성을 확인함으로써 강건성을 달성한다.
Abstract
이 논문은 비디오 클립의 셔터 각도, 즉 노출 시간과 프레임 레이트의 비율을 추정하는 새로운 방법을 제안한다. 이 방법은 광학 흐름과 선형 흐림의 관계를 활용한다.
제안된 방법의 주요 내용은 다음과 같다:
광학 흐름 모델: 광학 흐름은 연속된 프레임 간 픽셀 단위의 움직임을 나타낸다. 이 논문에서는 RAFT 모델을 사용한다.
선형 흐림 모델: 선형 흐림은 픽셀 단위로 1D 커널로 모델링된다. 이 논문에서는 Gong et al.의 방법을 사용한다.
셔터 각도와 선형 흐림, 광학 흐름의 관계: 셔터 각도는 선형 흐림 벡터와 광학 흐름 벡터의 비율로 표현된다.
셔터 각도 계산: 광학 흐름과 선형 흐림 추정이 모두 신뢰할 수 있는 이미지 패치를 선택하여 셔터 각도를 계산한다. 이를 통해 강건성을 달성한다.
실험 결과, 제안된 방법은 공개 데이터셋 Beam-Splitter Dataset에서 평균 절대 오차 0.039로 우수한 성능을 보였다. 또한 비디오 조작 탐지 응용 분야에서의 활용 가능성을 보였다.
Stats
셔터 각도 추정 오차가 가장 낮은 경우 평균 절대 오차는 0.039이다.
셔터 각도가 0.12 ~ 0.36 범위에서 가장 정확한 추정 결과를 보였다.
셔터 각도가 0.1 미만인 경우 추정 정확도가 낮아졌다.
Quotes
"셔터 각도는 노출 시간과 프레임 레이트의 역수의 비율이다."
"셔터 각도는 물체 운동과 이미지 흐림 사이의 관계를 결정하므로 관람자 인식에 영향을 미친다."
"셔터 각도는 비디오 조작 탐지에 활용될 수 있는 물리적 제약 조건을 제공한다."