Core Concepts
본 연구는 좌우 영상을 동시에 압축하는 저지연 신경 스테레오 비디오 압축 방법을 제안한다. 양방향 이동 모듈을 통해 좌우 영상 간 중복성을 효과적으로 포착하고 전달하여, 기존 방식보다 우수한 압축 성능과 낮은 지연 시간을 달성한다.
Abstract
본 논문은 새로운 저지연 신경 스테레오 비디오 압축 방법인 LLSS(Low-Latency Stereo video Streaming)를 제안한다. 기존 방식들은 좌우 영상을 순차적으로 압축하여 병렬 처리가 어려웠지만, LLSS는 양방향 이동 모듈을 통해 좌우 영상 간 중복성을 효과적으로 포착하고 전달하여 병렬 압축이 가능하도록 설계되었다.
구체적으로 LLSS는 두 개의 병렬 오토인코더를 사용한다. 하나는 모션 정보를, 다른 하나는 컨텍스트 정보를 압축한다. 이 과정에서 양방향 이동 모듈이 좌우 영상 간 특징을 효과적으로 연결하여 중복성을 줄인다. 이를 통해 LLSS는 기존 방식 대비 압축 성능이 크게 향상되었으며, 병렬 처리로 인해 지연 시간도 크게 감소하였다.
실험 결과, LLSS는 CityScapes 데이터셋에서 MV-HEVC 대비 50.6%, KITTI 2012 데이터셋에서 18.2%, KITTI 2015 데이터셋에서 15.8%의 BD-rate 감소를 달성하였다. 또한 LSVC 대비 35% 수준의 낮은 계산 복잡도를 보였다.
Stats
본 방법은 CityScapes 데이터셋에서 MV-HEVC 대비 50.6% BD-rate 감소를 달성하였다.
본 방법은 KITTI 2012 데이터셋에서 MV-HEVC 대비 18.2% BD-rate 감소를 달성하였다.
본 방법은 KITTI 2015 데이터셋에서 MV-HEVC 대비 15.8% BD-rate 감소를 달성하였다.
본 방법은 LSVC 대비 35% 수준의 낮은 계산 복잡도를 보였다.
Quotes
"본 연구는 좌우 영상을 동시에 압축하는 저지연 신경 스테레오 비디오 압축 방법을 제안한다."
"양방향 이동 모듈을 통해 좌우 영상 간 중복성을 효과적으로 포착하고 전달하여, 기존 방식보다 우수한 압축 성능과 낮은 지연 시간을 달성한다."
"LLSS는 기존 방식 대비 압축 성능이 크게 향상되었으며, 병렬 처리로 인해 지연 시간도 크게 감소하였다."