이 연구는 오디오와 영상의 통합적 활용을 위한 과학적 및 예술적 접근을 다룬다.
먼저 코퍼스 기반 연결 합성 기술과 오디오비주얼 다중 양상성에 대한 현재 연구 동향을 살펴본다.
이를 바탕으로 영상 분석 모듈 "ViVo"를 개발하고, 오디오와의 매핑 및 실시간 VJing 환경을 구축한다.
또한 이를 활용한 몰입형 오디오비주얼 작품 제작 과정과 미학적 고찰을 제시한다.
특히 소리와 영상의 상호작용을 위한 물리적, 지각적, 인지적 측면을 탐구하고, 이를 통해 새로운 창작 도구와 표현 방식을 모색한다.
To Another Language
from source content
arxiv.org
Key Insights Distilled From
by Mateo Fayet at arxiv.org 04-17-2024
https://arxiv.org/pdf/2404.10578.pdfDeeper Inquiries