DOI QR코드

DOI QR Code

음악에 어울리는 춤 자동 생성 및 실시간 춤 모션 판정

Music-Driven Choreography Generation and Real-time Motion Assessment

  • 박소현 (숙명여자대학교 IT 공학전공 ) ;
  • 정유진 (숙명여자대학교 IT 공학전공 ) ;
  • 박근영 (숙명여자대학교 IT 공학전공 ) ;
  • 강지우 (숙명여자대학교 인공지능공학부)
  • So-Hyun Park (Department of IT Engineering, Sookmyung Women's University) ;
  • Yu-Jin Jeong (Department of IT Engineering, Sookmyung Women's University) ;
  • Kuen-Young Park (Department of IT Engineering, Sookmyung Women's University) ;
  • Ji-Woo Kang (Division of Artificial Intelligence Engineering, Sookmyung Women's University)
  • 발행 : 2023.05.18

초록

최근 화제인 가상 아이돌의 춤 제작에 많은 자원 및 비용이 발생한다. 만일 춤을 자동으로 생성해 3D 모델에 피팅하면 이러한 비용을 줄일 수 있으며, 다양하고 복잡한 춤의 구현도 가능할 것이다. 또한, 댄스 게임을 통해 춤을 배우고 즐기는 사람들이 많지만, 경험할 수 있는 춤이 한정적이며, 모션 인식 정확도가 낮다는 단점이 있다. 따라서 본 논문에서는 트랜스포머 구조의 인공지능 모델을 통해 음악에 어울리는 3D 춤 모션을 자동으로 생성하고, 3D 자세 추정 모델을 사용해 사용자의 모션을 추정한 후, 두 모션의 유사도를 랜드마크 3D 좌표로 계산하여 판정하고자 한다. 이는 1 인 댄스 룸 또는 댄스 게임에 활용되어 발전 가능하다.

키워드

과제정보

이 성과는 정부(과학기술정보통신부)의 재원으로 한국연구재단의 지원을 받아 수행된 연구임 (No. 2022R1F1A1068704)