핵심 개념
RoCoTex是一種新穎的方法,能夠生成高品質且一致的紋理,解決了現有方法存在的問題,如視角不一致、紋理與網格不對齊以及明顯的接縫。
초록
本文提出了RoCoTex,這是一種基於擴散模型的紋理合成方法,能夠解決生成視角一致、與網格對齊以及無縫的高品質紋理的挑戰。
RoCoTex的主要貢獻包括:
- 結合對稱視角合成策略和區域提示,顯著提高了視角一致性,緩解了Janus問題。
- 結合SDXL和多個ControlNet,生成高保真度且與幾何結構對齊的紋理,捕捉了結構特徵和細節。
- 引入了基於像素置信度的紋理混合和基於微分擴散的軟填充技術,成功減少了接縫區域。
- 大量實驗證明了RoCoTex的強大性和一致性,優於現有最先進的方法。
RoCoTex首先使用對稱視角合成策略生成兩個視角的圖像,並利用區域提示來緩解Janus問題。然後,它採用SDXL作為生成主幹,並輔以深度、法線和邊緣的ControlNet,以生成高保真度且與幾何結構對齊的紋理。最後,RoCoTex採用基於像素置信度的紋理混合和基於微分擴散的軟填充技術,顯著減少了接縫區域。
實驗結果表明,RoCoTex在紋理質量、一致性和對齊性方面均優於現有的最先進方法。
통계
生成的紋理能夠捕捉結構特徵和細節,與網格幾何結構高度對齊。
採用對稱視角合成策略和區域提示,顯著提高了視角一致性,緩解了Janus問題。
基於像素置信度的紋理混合和基於微分擴散的軟填充技術,成功減少了接縫區域。
인용구
"RoCoTex是一種新穎的方法,能夠生成高品質且一致的紋理,解決了現有方法存在的問題,如視角不一致、紋理與網格不對齊以及明顯的接縫。"
"RoCoTex結合對稱視角合成策略和區域提示,顯著提高了視角一致性,緩解了Janus問題。"
"RoCoTex採用基於像素置信度的紋理混合和基於微分擴散的軟填充技術,成功減少了接縫區域。"