• 방송공학회논문지
• /
• 제27권5호
• /
• pp.718-727
• /
• 2022

국내 웹툰 산업 매출액이 전년도 대비 약 65% 폭발적 성장을 하였고 향후 매출 규모가 1조원을 돌파할 것이라 예상을 하고 있다. 웹툰 제작 과정을 살펴보면 스토리와 콘티와 같이 창작을 필요로 하는 작업도 있지만, 스케치와 펜터치와 같은 단순 반복 작업도 있기 때문에 최근 주목받고 있는 딥러닝 기반 인간자세 추정방법을 사용하여 간소화 할 수 있다면, 웹툰 제작 과정을 효과적으로 개선할 수 있다. 따라서 본 연구는 인간자세 추정방법을 사용하여 인간의 동작을 스케치한 2차원 웹툰 캐릭터와 관절을 매칭 시켜서, 인간의 동작에 따라서 캐릭터의 동작을 생성시키는 방법을 제안한다. 이를 위해 생성한 2차원 캐릭터를 SVG 파일 형식인 벡터화된 그래픽 이미지로 생성시켜 인간자세의 관절을 나타내는 스켈레톤과 매칭을 시켰다. 실험결과를 통해 2차원 웹툰 캐릭터의 포즈가 웹 카메라의 사용자 자세와 동일한 동작을 생성시킬 수 있는 것을 확인할 수 있었다. 또한 저장한 정지 이미지에서 하나의 포즈를 선별하여 필요한 장면에 삽입할 수도 있고, 연속 동작에 대하여 비디오로 녹화하여 포즈 선별을 할 수 있다는 점도 확인하였다. 제안한 포즈 생성 방법은 기존의 포즈 투 포즈 방식 애니메이션 포즈 생성에 큰 기여를 할 수 있을 것으로 기대된다.

• 한국멀티미디어학회논문지
• /
• 제24권2호
• /
• pp.336-343
• /
• 2021

AI technology is spreading not only to industrial fields, but also to culture, art, and content fields. In this paper, we proposed a system based on AI technology that can automate the process of reproducing contents using characters for movie contents. After creating the basic appearance of the character by using the StyleGAN2 model from the video extracted from the movie contents, analyzing the character's personality and propensity using the extracted dialogue data, it was determined from the contemplative appearance based on the yin-yang and five elements to the character's propensity. Accordingly, the external characteristics are reflected in the character. Using the OpenPose model, a character's motion is created, and the finally generated data is integrated to reproduce the content. It is expected that many movie contents can be reproduced through the study of the proposed system.

• 디지털융복합연구
• /
• 제15권12호
• /
• pp.489-494
• /
• 2017

게임 애니메이션은 영상 애니메이션과 제작 과정에서 많은 차이가 있지만, 컴퓨터에서 작업하는 애니메이팅 방식은 크게 다르지 않다. 게임 애니메이션 제작에서도 영상 애니메이션에서의 원칙과 원리가 강조되어 제작되기 때문이다. 본 연구에서는 게임 애니메이션 제작 시 캐릭터의 포즈작업에 있어 여러 가지 고려해야 할 사항들 중, 동작의 방향과 에너지의 흐름을 알 수 있는 Line of Action에 대하여 고찰하고자 한다. Line of Action은 드로잉의 기초 이론으로 시작하여 셀 애니메이션부터 3d 애니메이션까지 포즈 작업에 있어 바이블의 역할을 하고 있다. 이러한 Line of Action이 게임 캐릭터의 포즈 작업에서 어떻게 적용되는지 알아보고자 선행연구를 통하여 이론적 배경을 살펴본 후, 3d 온라인 게임 '오버워치'의 영웅 캐릭터들의 포즈(pose)를 수집하고 직접 라인을 그려 포즈를 분석하였다. 그 결과 단순하고 명확한 동선을 가진 캐릭터들의 포즈가 캐릭터의 특징을 잘 표현하고 전달이 명확한 것을 알 수 있었다. 이 연구를 통하여 게임 애니메이션 제작에서 캐릭터 포즈의 표현 기법에 대하여 고찰하고자 하였으며, 실무에서 게임애니메이터들에게 중요한 참고자료가 되기를 기대한다.

• 만화애니메이션 연구
• /
• 통권41호
• /
• pp.57-73
• /
• 2015

애니메이션에서 포즈는 타이밍, 스페이싱과 더불어 중요한 요소라고 말할 수 있다. 포즈는 애니메이션 동작의 스토리텔링이나 상황을 설명하는 중요한 역할을 한다. 애니메이팅 방식은 스트레이트 어헤드 (Straight ahead action) 와 포즈 투 포즈 (Pose to pose) 방식이 있고, 애니메이션 작업자들은 이 두 방식을 사용하거나 두 가지 방식을 혼용해서 사용하고 있다. 컴퓨터 애니메이션은 키 프레임 사이에 보간법을 이용해 포즈 사이에 인비트윈(inbetween) 동작들을 생성하도록 하고 있고, 컴퓨터 애니메이션 작업자들은 포즈 투 포즈 방식의 작업을 많이 쓰고 있다. 애니메이션에서 어떤 하나의 스토리나 상황을 표현하기 위해서 강력하고 좋은 포즈들을 만들어 내느냐 마느냐가 전체 애니메이션 동작의 질을 좌우한다고 볼 수 있다. 또한 이것은 관객들이 애니메이션을 잘 이해 할 수 있는지 없는지, 작업자에겐 능률적인 혹은 비효율적인 작업이 되게 하는 열쇠이다. 이 논문에서는 효과적이고 좋은 포즈를 잡아내는 데에 있어서 4가지 방법을 제시하고자 한다. 4가지의 포즈 선별 방법은 스트레치와 스쿼시의 포즈, 캐릭터의 발 혹은 사물의 높낮이 결정을 통한 포즈, 무게 중심을 고려한 포즈, 캐릭터의 경우 스텝을 밟을 때의 포즈들이다. 이 방법은 디즈니의 애니메이션의 12가지 법칙을 최대한 응용 했고 컴퓨터 애니메이션의 작업 방식에 특징을 고려한 방법이다.

• 한국콘텐츠학회논문지
• /
• 제10권9호
• /
• pp.1-8
• /
• 2010

본 논문에서는 제스처 인식 대형 놀이 시스템을 기반으로한 한자 학습 콘텐츠에 대해 제안한다. 제안한 시스템은 두 대의 적외선 영상에서 사용자의 포즈를 예측하는 부분과 연속된 포즈들로부터 제스처를 인식하는 부분으로 구성되어 있다. 그리고 각각의 적외선 카메라에서 하나의 포즈에 대한 정면 포즈와 옆면 포즈로 나눠서 획득한 후 이를 사용하여 HMM의 모델을 이용하여 제스처를 분류하였다. 사용자와 컴퓨터간 의사소통에 있어서, 장치를 사용하지 않고 사용자의 행동에 의한 조작을 통해 사용자가 쉽게 조작할 수 있고 편리함을 제공하였다. 또한 두 개의 대형 디스플레이와 다양한 멀티미디어 요소를 이용하여 몰입과 흥미를 유발시킬 수 있기 때문에 정보 전달을 극대화할 수 있다. 단순한 주입식 교육 콘텐츠가 아닌 에듀테인먼트 콘텐츠인 한자 학습 콘텐츠는 게임과 교육을 동시에 제공하여 사용자에게 재미와 흥미를 주어 자연스레 한자를 습득할 수 있고 제스처 기반 대형 놀이 시스템과 결합하면서 사용자에게 놀면서 배울 수 있는 시너지 효과를 기대할 수 있다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제25권3호
• /
• pp.85-92
• /
• 2019

디지털 스토리텔링에 등장하는 3차원 가상 캐릭터에는 외형뿐만 아니라 자세나 동작에서도 캐릭터의 개성이 반영된 고유의 스타일이 부여된다. 그러나 사용자가 웨어러블 동작센서를 사용하여 직접 캐릭터의 신체 동작을 제어하는 경우 캐릭터 고유의 스타일이 무시될 수 있다. 본 연구에서는 가상 캐릭터를 위해 제작된 소량의 애니메이션 데이터만을 이용하는 검색 기반 캐릭터 동작 제어 기술을 사용하여 캐릭터 고유의 스타일을 유지하는 기술을 제시한다. 대량의 학습 데이터를 필요로하는 기계학습법을 피하는 대신 소량의 애니메이션 데이터로부터 사용자의 자세와 유사한 캐릭터 자세를 직접 검색하여 사용하는 기술을 제안한다. 제시된 방법을 검증하기 위해 전문가에 의해 제작된 가상현실 게임용 캐릭터 모델과 애니메이션 데이터를 사용하여 실험하였다. 평범한 사람의 모션캡쳐 데이터를 사용했을 때와의 결과를 비교하여 캐릭터 스타일이 보존됨을 증명하였다. 또한 동작센서의 개수를 달리한 실험을 통해 제시된 방법의 확장성을 증명하였다.

• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제16권5호
• /
• pp.611-615
• /
• 2010

본 논문은 이차 변형을 이용하여 캐릭터 동작을 만화적으로 과장하는 방법을 소개한다. 기존의 캐릭터 동작 과장 기법이 각 관절의 회전각 운동 곡선을 독립적으로 과장한 것과 달리, 우리는 캐릭터의 전체적인 포즈를 이차 변형으로 모델링하고 이를 과장함으로써 캐릭터 전체의 움직임이 과장되는 효과를 낼 수 있었다. 제시한 방법은 실시간에 빠르게 계산될 수 있으며 관절이 불안정한 방향으로 꺾이는 등의 부작용이 상대적으로 적다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제26권2호
• /
• pp.11-19
• /
• 2020

캐릭터의 자세가 변할 때 마다 캐릭터의 무게 중심(COM) 위치도 변하게 된다. 이 때 무게 중심의 위치 변화는 걷기, 뛰기, 쭈그려 앉기 등 다양한 동작 각각에 대응되는 독자적인 패턴을 가지므로 이를 이용하면 원래 동작의 정보를 알아낼 수 있다. 본 논문에서는 캐릭터의 무게 중심의 위치 변화를 토대로 동작을 예측하는 모션 생성 기법을 제안한다. 이 방법을 이용하면 무게 중심 정보를 통해 원래 동작의 유형에 대한 별도의 라벨 없이도 다양한 동작을 생성할 수 있다. 그러므로 네트워크의 학습 및 실행을 위한 데이터셋을 만들 때 사람의 손을 거칠 필요 없이 전처리를 비롯한 모든 과정을 자동으로 진행할 수 있다. 본 논문에서 제안하는 신경망 모델은 캐릭터의 모션 이력(history) 정보와 무게 중심 정보들을 입력 받아 현재 프레임에서의 포즈 정보를 출력하며, 연속적인 시계열 모션 데이터를 다루기 위해 1차원 Convolution을 수행하는 간단한 형태의 Convolutional Neural Network(CNN)를 사용하여 학습되었다.

• 한국전자통신학회논문지
• /
• 제18권6호
• /
• pp.1321-1330
• /
• 2023

본 연구는 증강현실에서 적용할 캐릭터 생성에서 단일 이미지를 통해 여러 객체에 대한 3D 자세 추정 문제를 연구한다. 기존 top-down 방식에서는 이미지 내의 모든 객체를 먼저 감지하고, 그 후에 각각의 객체를 독립적으로 재구성한다. 문제는 이렇게 재구성된 객체들 사이의 중첩이나 깊이 순서가 불일치 하는 일관성 없는 결과가 발생할 수 있다. 본 연구의 목적은 이러한 문제점을 해결하고, 장면 내의 모든 객체에 대한 일관된 3D 재구성을 제공하는 단일 네트워크를 개발하는 것이다. SMPL 매개변수체를 기반으로 한 인체 모델을 top-down 프레임워크에 통합이 중요한 선택이 되었으며, 이를 통해 거리 필드 기반의 충돌 손실과 깊이 순서를 고려하는 손실 두 가지를 도입하였다. 첫 번째 손실은 재구성된 사람들 사이의 중첩을 방지하며, 두 번째 손실은 가림막 추론과 주석이 달린 인스턴스 분할을 일관되게 렌더링하기 위해 객체들의 깊이 순서를 조정한다. 이러한 방법은 네트워크에 이미지의 명시적인 3D 주석 없이도 깊이 정보를 제공하게 한다. 실험 결과, 기존의 Interpenetration loss 방법은 MuPoTS-3D가 114, PoseTrack이 654에 비해서 본 연구의 방법론인 Lp 손실로 네트워크를 훈련시킬 때 MuPoTS-3D가 34, PoseTrack이 202로 충돌수가 크게 감소하는 것으로 나타났다. 본 연구 방법은 표준 3D 자세벤치마크에서 기존 방법보다 더 나은 성능을 보여주었고, 제안된 손실들은 자연 이미지에서 더욱 일관된 재구성을 실현하게 하였다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제21권1호
• /
• pp.23-31
• /
• 2015

본 논문은 모션 캡쳐 데이터를 이용하여 쉽고 빠르게 사실적인 2차원 스틱 피규어애니메이션을 제작할 수 있는 방법을 소개한다. 스틱 피규어 애니메이션은 대개 전체 시간 구간에 대하여 매 프레임마다 하나씩의 자세를 일일이 그리는 방식으로 제작된다. 반면, 제안된 방법에서는 스틱 피규어 형태의 자세 위에 신체 부위의 움직임을 나타내는 동선을 추가하는 방식으로 한 장의 그림 안에 여러 프레임에 걸친 동작(예를 들어, 발차기나 점프)을 축약하여 표현하도록 한다. 이러한 그림으로부터 자동으로 시간에 따른 자세 변화를 합성하기 위하여, 먼저 사용자가 그린 스틱 피규어를 2차원 평면에서 변형시킬 수 있는 캐릭터 모델을 생성한다. 이 후, 미리 구축된 모션 데이터베이스로부터 주어진 자세 및 동작선 정보에 가장 근접한 동작 구간을 검색한다. 검색 결과로 추출된 동작에 따라 캐릭터 모델을 변형시킴으로써 최종적인 스틱 피규어애니메이션을 합성한다. 여러 형태의 스틱 피규어에 이동, 격투 등의 다양한 동작을 적용한 실험을 통하여, 제안된 방법이 적은 노력만으로 흥미로운 스틱 피규어애니메이션을 제작하는데 매우 유용함을 확인하였다.