DOI QR코드

DOI QR Code

Development of Camera-based Character Creation and Motion Control System using StyleGAN Deep Learning Technology

StyleGAN 딥러닝 기술을 활용한 카메라 기반 캐릭터 생성 및 모션 제어 시스템 개발

  • Lee, Jeong-Hun (Dept. Of Semiconductor Convergence Software, Semiconductor Convergence Campus Korea Polytechnics) ;
  • Kim, Ju-Hyeong (Dept. Of Semiconductor Convergence Software, Semiconductor Convergence Campus Korea Polytechnics) ;
  • Shin, Dong-hyeon (Dept. Of Semiconductor Convergence Software, Semiconductor Convergence Campus Korea Polytechnics) ;
  • Yang, Jae-hyeong (Dept. Of Semiconductor Convergence Software, Semiconductor Convergence Campus Korea Polytechnics) ;
  • Chang, Moon-soo (Dept. Of Semiconductor Convergence Software, Semiconductor Convergence Campus Korea Polytechnics)
  • 이정훈 (한국폴리텍대학 반도체융합캠퍼스 반도체융합 SW 과) ;
  • 김주형 (한국폴리텍대학 반도체융합캠퍼스 반도체융합 SW 과) ;
  • 신동현 (한국폴리텍대학 반도체융합캠퍼스 반도체융합 SW 과) ;
  • 양재형 (한국폴리텍대학 반도체융합캠퍼스 반도체융합 SW 과) ;
  • 장문수 (한국폴리텍대학 반도체융합캠퍼스 반도체융합 SW 과)
  • Published : 2022.11.21

Abstract

현재 사회적인(COVID-19) 영향으로 메타버스에 대한 수요가 급증하였지만, 메타버스 플랫폼 진입을 지원하는 XR(AR/VR) 장비의 높은 가격대와 전문성 요구로 폭넓은 수요층을 포괄하기 어려운 상황이다. 본 논문에서는 이러한 수요층의 어려움을 개선하고자 웹 캠이나 스마트폰 카메라로 생성된 개인의 사진 이미지를 StyleGAN 딥러닝 기술과 접목시켜 캐릭터를 생성해 Mediapipe를 활용하여 모션 측정 및 제어를 처리하는 서비스를 제안하여 메타버스 시장의 대중화에 기여하고자 한다.

Keywords

Acknowledgement

본 프로젝트는 과학기술정보통신부 정보통신창의인재양성사업의 지원을 통해 수행한 ICT 멘토링 프로젝트 결과물입니다.