Personal-Fit Virtual Try-On iOS Mobile Service using 3D Human body and Clothing model reconstruction

3D 인체 및 의상복원을 사용한 개인체형맞춤 가상착용 iOS 모바일 서비스 설계 및 개발

  • Yoo, Seungwon (Seoul National University of Science and Technology, Dept. Electrical & Info Eng.) ;
  • Oh, Sangmin (Seoul National University of Science and Technology, Dept. Electrical & Info Eng.) ;
  • Ahn, Heejune (Seoul National University of Science and Technology, Dept. Electrical & Info Eng.)
  • 유승원 (서울과학기술대학교 전기정보공학과) ;
  • 오상민 (서울과학기술대학교 전기정보공학과) ;
  • 안희준 (서울과학기술대학교 전기정보공학과)
  • Published : 2022.11.18

Abstract

본 논문에서는 3차원 스캔 없이 이미지 입력만을 사용한 개인 체형을 고려한 모바일 가상 착용 시스템의 전체 과정을 설계하고 개발하였다. 이를 위하여 이미지상 인물의 자세와 체형의 추정을 통하여 3차원 인체모델(SMPL)을 추정하는 최근의 방식을 이용하였고, 앞 뒷면 의상 이미지를 2차원 texture 매핑과 평면 triangle mesh로 복원하고 의상 봉제 (sewing) 시뮬레이션을 사용하여 3차원 의상 모델을 생성하는 방법을 새롭게 개발하였다. 또한 이를 활용한 3차원 개인화된 가상 착용 모바일 앱과 서비스를 Flask와 iOS 환경에서 SceneKit을 활용하여 개발하였다. 이를 통하여 단순히 의상의 매칭과 스타일 뿐 아니라 사이즈에 따른 착용 Fit을 구매 전에 확인할 수 있는 전체 서비스를 실현 및 검증하였다.

Keywords

Acknowledgement

본 이 성과는 정부(과학기술정보통신부)의 재원으로 한국연구재단의 지원을 받아 수행된 연구입니다(No. 2021R1F1A1045391)