본 논문은 2D 스케치로부터 고품질 3D 모델을 생성하는 새로운 프레임워크인 S3D를 제시합니다. S3D는 U-Net 기반 인코더-디코더 아키텍처를 사용하여 스케치를 면 분할 마스크로 변환하고, 이를 이용하여 새로운 시점에서 렌더링 가능한 3D 표현을 생성합니다. 스케치 도메인과 3D 출력 간의 강력한 일관성을 보장하기 위해, U-Net 병목 특징을 3D 생성 모듈의 초기 인코더 출력과 정렬하는 새로운 스타일 정렬 손실을 도입하여 재구성 충실도를 크게 향상시킵니다. 또한, 스케치 데이터셋에 증강 기법을 적용하여 네트워크의 강건성을 더욱 향상시킵니다. 소스 코드는 https://github.com/hailsong/S3D 에서 공개적으로 이용 가능합니다.
