이미지를 사용한 가상의상착용 알고리즘들의 성능 분석 = Performance Evaluation of VTON (Virtual-Try-On) Algorithms using a Pair of Cloth and Human Image

국문 초록 (Abstract)

가상착용기술(VTON: Virtual try-on)은 의상의 온라인 유통을 활성화를 위하여 중요한 기술이 다. 그러나 3차원 그래픽스기반 방식은 의상과 인체의 3차원 정보의 확보가 필요하여 범용화에 어려움이 있고, 이러한 제약을 해소하기 위해 개발되는 이미지 기반 방식들의 연구들은 그 기술적 한계가 불명확하 다. 구체적으로 VITON (Virtual image try-on) 과 CP-VTON (Content preserving VTON)등은 가능성 위 주의 매우 단편적인 결과만을 제시하고 있다. 본 논문은 이미지기반 기술의 상용화의 한계를 파악하기 위 해, 세 가지 대표적 방식(SCMM 기반의 비-딥러닝 방식, 딥러닝기반 VITON 과 CP-VTON에 대하여 인물 의 자세 및 체형, 의상의 가려짐 정도, 의상의 특성 등에 따라 분석을 하였다. 객관적인 평가를 위하여 변 형단계와 합성단계의 성능을 각각 IoU와 SSIM로 평가하였고, 상대적인 비교 분석을 하였다. 그 결과, CP-VTON이 가장 좋은 성능을 보이지만, 자세와 의상의 복잡도에 따라 성능의 한계가 크게 차이가 남을 보였다. 그 주 원인은 2차 기하변형의 한계와 GAN을 통한 합성 기술의 한계로 파악되었다.

참고문헌 (Reference)

1 안희준, "마네킨 의상사진 기반 온라인 가상의상착용" 한국산업정보학회 23 (23): 29-38, 2018

2 Han, X., "Viton: An Image-based Virtual Try-on Network" 7543-7552, 2018

3 Wang, B., "Toward Characteristic-preserving Image-based Virtual Try-on Network" 589-604, 2018

4 Raj, A., "Swapnet:Garment Transfer in Single View Images" 666-682, 2018

5 Belongie, S., "Shape Matching and Object Recognition using Shape Contexts" 25 (25): 509-522, 2002

6 Cao, Z., "Realtime Multi-person 2d Pose Estimation using Part Affinity Fields" 7291-7299, 2017

7 Weng, C. Y., "Photo Wake-up: 3d Character Animation from a Single Photo" 5908-5917, 2019

8 Liang, X., "Look into Person : Joint Body Parsing & Pose Estimation Network and a New Benchmark" 41 (41): 871-885, 2018

9 안희준, "Image-based Virtual Try-On System: Full Automatic System Design and its Performance" (사)한국컴퓨터게임학회 31 (31): 37-45, 2018

10 Zanfir, M., "Human Appearance Transfer" 5391-5399, 2018