이 논문에서는 CityDreamer라는 구성적 생성 모델을 제안한다. CityDreamer는 3D 도시 생성을 위해 특별히 설계되었으며, 건물 인스턴스와 배경 요소(도로, 녹지, 수역 등)를 분리하여 생성한다.
먼저 무한대 규모의 도시 레이아웃을 생성하는 레이아웃 생성기를 통해 도시의 구조를 만든다. 이후 배경 생성기와 건물 인스턴스 생성기를 통해 각각 배경과 건물을 생성한다. 배경 생성기는 일반적인 배경 요소의 유사한 외관을 잘 표현하기 위해 생성 해시 그리드를 사용하고, 건물 인스턴스 생성기는 건물 외관의 주기적 패턴을 잘 학습하기 위해 주기적 위치 인코딩을 사용한다. 마지막으로 합성기를 통해 생성된 배경과 건물 인스턴스를 합성하여 최종 이미지를 생성한다.
또한 이 논문에서는 실제 세계의 도시 레이아웃과 외관을 포함하는 CityGen 데이터셋을 구축하였다. OSM 데이터셋은 80개 도시의 의미론적 지도와 높이 필드를 제공하고, GoogleEarth 데이터셋은 뉴욕시의 400개 궤도 이미지와 의미론적 및 인스턴스 분할 주석을 제공한다.
실험 결과, CityDreamer는 기존 방법들에 비해 더 사실적이고 다양한 3D 도시를 생성할 수 있으며, 3D 기하학과 다중 뷰 일관성 측면에서도 우수한 성능을 보인다.
To Another Language
from source content
arxiv.org
Key Insights Distilled From
by Haozhe Xie,Z... at arxiv.org 04-02-2024
https://arxiv.org/pdf/2309.00610.pdfDeeper Inquiries