Keskeiset käsitteet
단일 모노크롬 비디오를 입력으로 받아 실시간 렌더링이 가능하고 메모리 효율적인 고품질의 애니메이션 가능 디지털 아바타를 생성하는 GoMAvatar 기술을 제안한다.
Tiivistelmä
이 논문은 단일 모노크롬 비디오를 입력으로 받아 실시간 렌더링이 가능하고 메모리 효율적인 고품질의 애니메이션 가능 디지털 아바타를 생성하는 GoMAvatar 기술을 제안한다.
핵심 내용은 다음과 같다:
- GoMAvatar의 핵심은 Gaussians-on-Mesh (GoM) 표현으로, 렌더링 속도와 품질을 높이기 위해 Gaussian 스플래팅과 변형 가능한 메시를 결합한 하이브리드 3D 모델이다.
- GoM은 메시 상의 각 삼각형에 Gaussian을 연결하여 다양한 자세에서도 Gaussian의 형태를 효과적으로 조절할 수 있다.
- 렌더링 시 Gaussian 스플래팅과 메시 래스터라이제이션을 결합하여 실시간 성능과 고품질 렌더링을 달성한다.
- 실험 결과, GoMAvatar는 기존 최신 기술 대비 렌더링 품질은 유사하거나 더 우수하면서 렌더링 속도는 최대 257배 빠르고 메모리 사용량도 매우 작다.
Tilastot
단일 모노크롬 비디오로부터 실시간(43FPS) 렌더링이 가능하다.
메모리 사용량이 3.63MB로 매우 작다.