이 논문은 Neural Radiance Fields (NeRF), TensoRF, ZipNeRF와 같은 암시적 및 명시적 방사 장 모델의 성능을 향상시키기 위한 정규화 기법을 제안한다. 저자들은 희소 입력 시나리오에서 이러한 모델들이 불필요하게 복잡한 솔루션을 학습하여 심각한 왜곡이 발생한다는 것을 관찰했다. 이를 해결하기 위해 저자들은 모델의 능력을 줄이는 증강 모델을 설계하여 더 단순한 솔루션을 학습하도록 한다. 구체적으로:
NeRF의 경우, 높은 위치 인코딩 차수와 시야 의존적 방사 기능으로 인해 발생하는 문제를 해결하기 위해 위치 인코딩 차수를 줄이고 시야 의존적 방사 기능을 비활성화한다.
TensoRF의 경우, 많은 수의 고해상도 분해 구성 요소로 인해 발생하는 문제를 해결하기 위해 구성 요소의 수와 해상도를 줄인다.
ZipNeRF의 경우, 큰 해시 테이블로 인해 발생하는 문제를 해결하기 위해 해시 테이블의 크기를 줄인다.
저자들은 이렇게 설계된 증강 모델을 통해 추정된 깊이를 주요 방사 장 모델의 학습에 활용한다. 또한 추정된 깊이의 신뢰성을 판단하는 메커니즘을 제안한다. 실험 결과, 제안된 정규화 기법은 다양한 방사 장 모델과 데이터셋에서 상당한 성능 향상을 보여준다.
To Another Language
from source content
arxiv.org
Viktige innsikter hentet fra
by Nagabhushan ... klokken arxiv.org 05-01-2024
https://arxiv.org/pdf/2404.19015.pdfDypere Spørsmål