이 논문은 3D 텍스처드 메시에서 직접 방사 장을 추출하는 Mesh2NeRF 방법을 제안합니다. 기존 방법은 다중 뷰 렌더링에서 방사 장을 피팅하는데, 이는 가림 현상이나 과소 적합 문제로 인해 아티팩트가 발생할 수 있습니다.
Mesh2NeRF는 메시 표면의 밀도 필드와 반사 함수를 모델링하여 정확한 방사 장을 직접 추출합니다. 이를 통해 신경 방사 장 생성을 위한 직접적인 3D 감독을 제공할 수 있습니다.
구체적으로 Mesh2NeRF는 다음과 같은 과정을 거칩니다:
Mesh2NeRF는 단일 장면 표현, 조건부 생성, 무조건부 생성 등 다양한 NeRF 기반 3D 생성 작업에서 우수한 성능을 보입니다. 특히 ABO 데이터셋에서 단일 장면 표현 시 3.12dB의 PSNR 향상, ShapeNet Cars의 단일 뷰 조건부 생성에서 0.69 PSNR 향상, Objaverse Mugs의 무조건부 생성에서 메시 추출 성능 향상 등의 결과를 보여줍니다.
To Another Language
from source content
arxiv.org
Thông tin chi tiết chính được chắt lọc từ
by Yuji... lúc arxiv.org 03-29-2024
https://arxiv.org/pdf/2403.19319.pdfYêu cầu sâu hơn