Core Concepts
DermSynth3D는 3D 인체 메쉬에 실제 피부 질환 이미지를 혼합하여 다양한 각도와 조명 조건에서 합성된 2D 피부 질환 이미지와 세부 주석을 생성한다.
Abstract
DermSynth3D는 다음과 같은 과정을 통해 실제와 유사한 피부 질환 이미지 데이터셋을 생성한다:
3D 인체 메쉬와 실제 피부 질환 이미지를 입력받음
피부 질환 이미지를 3D 메쉬의 적절한 위치에 배치하고 미분 가능한 렌더러를 사용하여 혼합
다양한 카메라 각도와 조명 조건에서 2D 이미지를 렌더링하고 세부 주석(피부 질환 영역, 건강한 피부, 비피부 영역, 신체 부위 레이블, 깊이 정보 등) 생성
렌더링된 2D 이미지에 실내 배경 이미지를 합성하여 실제와 유사한 "야생" 피부 질환 이미지 데이터셋 구축
이를 통해 기존 데이터셋의 한계를 극복하고 다양한 피부 질환 분석 작업에 활용할 수 있는 데이터셋을 생성할 수 있다.
Stats
피부 질환 영역과 건강한 피부 영역을 구분하는 것이 중요하다.
피부 질환 영역의 크기와 위치는 질환 진단에 중요한 단서가 될 수 있다.
신체 부위 정보는 질환 진단과 치료에 도움이 될 수 있다.
깊이 정보는 3D 재구성 및 시각화에 활용될 수 있다.
Quotes
"DermSynth3D는 3D 인체 메쉬에 실제 피부 질환 이미지를 혼합하여 다양한 각도와 조명 조건에서 합성된 2D 피부 질환 이미지와 세부 주석을 생성한다."
"이를 통해 기존 데이터셋의 한계를 극복하고 다양한 피부 질환 분석 작업에 활용할 수 있는 데이터셋을 생성할 수 있다."