• 한국컴퓨터산업학회논문지
• /
• 제4권4호
• /
• pp.569-578
• /
• 2003

본 논문은 광학식 얼굴 모션 캡쳐 데이터를 재사용하여 원하는 얼굴 표정 애니메이션을 실시간에 생성하는 방법을 기술한다. 이 방법의 핵심요소는 얼굴 표정들 간의 거리를 정의하고 이를 이용하여 표정들을 적당한 공간에 분포시키는 방법과 이 공간을 사용하여 실시간 표정 애니메이션을 생성하기 위한 사용자 인터페이스 기법이다. 우리는 약 2400여개의 얼굴 표정 프레임 데이터를 이용하여 공간을 생성하였다. 그리고 사용자가 이 공간을 자유롭게 항해할 때, 항해경로 상에 위치한 얼굴 표정 프레임 데이터들이 연속적으로 선택되어 하나의 애니메이션이 생성되도록 하였다. 약 2400여개의 얼굴 표정 프레임 데이터들을 직관적인 공간상에 분포하기 위해서는 데이터와 데이터 사이의 거리를 계산해야할 필요가 있고, 각 데이터와 데이터 사이의 최단거리를 구하는데 있어서는 Floyd 알고리즘을 사용하며, 이를 이용하여 Manifold distance를 구한다. 직관적인 공간에서의 데이터 배치는 얼굴 표정 프레임 데이터들의 Manifold distance를 이용하여 Multidimensional Scaling을 적용하고, 이로부터 2D 평면에 균일하게 분포하였다. 우리는 이와 같은 방법으로 기존의 얼굴 표정 프fp임 데이터들 사이의 거리를 원형 그대로 살리면서 의미 있게 직관적인 공간에 분포한다. 그러므로 본 논문에서 제시한 기법은 사용자가 항해하고자 하는 얼굴 표정 프레임 데이터들이 항상 주변에 존재할 수 있기 때문에, 얼굴 표정 애니메이션을 생성하기 위해서 직관적인 공간을 제한 없고 자유로운 항해를 할 수 있다는 큰 장점을 가지고 있다. 또한 사용자가 원하는 얼굴 표정 애니메이션을 사용하기 쉬운 사용자 인터페이스를 이용하여 실시간으로 생성하여 확인 하고 재생성할 수 있다는 것도 매우 효율적이다.

• 한국콘텐츠학회논문지
• /
• 제7권2호
• /
• pp.117-124
• /
• 2007

본 논문은 얼굴 모션 캡쳐 데이터를 재사용하여 실시간 표정 제어 및 표정 애니메이션을 생성하기 위한 방법론을 기술한다. 이 방법의 핵심요소는 얼굴 표정들을 정의할 수 있는 표정상태 표현법을 정하고, 이를 LLE 알고리즘에 적용하여 표정들을 적당한 공간에 분포시키는 방법론과, 이 공간을 사용하여 실시간 표정 애니메이션 생성 및 표정제어를 수행하기 위한 사용자 인터페이스 기법이다. 본 논문에서는 약 2400개의 얼굴 표정 프레임 데이터를 이용하여 공간을 생성하고, 애니메이터가 이 공간을 자유롭게 항해할 때, 항해경로 상에 위치한 얼굴 표정 프레임 데이터들이 연속적으로 선택되어 하나의 애니메이션이 생성되거나 표정제어가 가능하도록 하였다. 약 2400개의 얼굴 표정 프레임 데이터들을 직관적인 공간상에 분포하기 위해서는 얼굴 표정 프레임 데이터로부터 얼굴 표정상태를 표현할 필요가 있고, 이를 위해서는 임의의 두 마커 사이의 거리들로 구성된 거리행렬 벡터를 이용한다. 직관적인 공간에서의 데이터 배치는 얼굴 표정상태벡터들의 집합을 LLE 알고리즘에 적용하고, 이로부터 2차원 평면에 균일하게 분포하였다. 본 논문에서는 애니메이터로 하여금 사용자 인터페이스를 사용하여 실시간으로 표정 애니메이션을 생성하거나 표정제어를 수행하도록 하였으며, 그 결과를 평가한다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제25권3호
• /
• pp.85-92
• /
• 2019

디지털 스토리텔링에 등장하는 3차원 가상 캐릭터에는 외형뿐만 아니라 자세나 동작에서도 캐릭터의 개성이 반영된 고유의 스타일이 부여된다. 그러나 사용자가 웨어러블 동작센서를 사용하여 직접 캐릭터의 신체 동작을 제어하는 경우 캐릭터 고유의 스타일이 무시될 수 있다. 본 연구에서는 가상 캐릭터를 위해 제작된 소량의 애니메이션 데이터만을 이용하는 검색 기반 캐릭터 동작 제어 기술을 사용하여 캐릭터 고유의 스타일을 유지하는 기술을 제시한다. 대량의 학습 데이터를 필요로하는 기계학습법을 피하는 대신 소량의 애니메이션 데이터로부터 사용자의 자세와 유사한 캐릭터 자세를 직접 검색하여 사용하는 기술을 제안한다. 제시된 방법을 검증하기 위해 전문가에 의해 제작된 가상현실 게임용 캐릭터 모델과 애니메이션 데이터를 사용하여 실험하였다. 평범한 사람의 모션캡쳐 데이터를 사용했을 때와의 결과를 비교하여 캐릭터 스타일이 보존됨을 증명하였다. 또한 동작센서의 개수를 달리한 실험을 통해 제시된 방법의 확장성을 증명하였다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제29권5호
• /
• pp.11-20
• /
• 2023

본 논문에서는 손 동작을 포함한 전신 동작 생성이 가능하고 동작 생성 딜레이를 조절할 수 있는 새로운 딥러닝 기반 동작 복원 기술을 제안한다. 제안된 방법은 범용적으로 사용되는 센서인 바이브 트래커와 딥러닝 기술의 융합을 통해 더욱 정교한 동작 복원을 가능하게함과 동시에 IK 솔버(Inverse Kinematics solver)를 활용하여 발 미끄러짐 현상을 효과적으로 완화한다. 본 논문은 학습된 오토인코더(AutoEncoder)를 사용하여 트래커 데이터에 적절한 캐릭터 동작의 실시간 복원이 가능하고, 동작 복원 딜레이를 조절할 수 있는 방법을 제안한다. 복원된 전신 동작에 적합한 손 동작을 생성하기 위해 FCN(Fully Connected Network)을 사용하여 손 동작을 생성하고, 오토인코더에서 복원된 전신 동작과 FCN 에서 생성된 손 동작을 합쳐 손 동작이 포함된 캐릭터의 전신 동작을 생성할 수 있다. 앞서 딥러닝 기반의 방법으로 생성된 동작에서 발 미끄러짐 현상을 완화시키기 위해 본 논문에서는 IK 솔버 를 활용한다. 캐릭터의 발에 위치한 트래커를 IK 솔버의 엔드이펙터(end-effector)로 설정하여 캐릭터의 발 움직임을 정확하게 제어하고 보정하는 기술을 제안함으로써, 생성된 동작의 전반적인 정확성을 향상시켜 고품질의 동작을 생성한다. 실험을 통해, 본 논문에서 제안한 딥러닝 기반 동작 복원에서 정확한 동작 생성과 사용자 입력에 따라 프레임 딜레이 조정이 가능함을 검증하였고, 생성된 전신 동작의 발미끄러짐 현상에 대해 IK 솔버가 적용되기 이전 전신 동작과 비교하여 보정에 대한 성능을 확인하였다.

• 인터넷정보학회논문지
• /
• 제24권6호
• /
• pp.73-80
• /
• 2023

최근 최저시급의 가파른 인상으로 인건비에 대한 부담이 늘어남과 함께 코로나19의 여파로 무인 상점의 점유율이 높아지고 있는 추세이다. 그로 인해 무인 점포를 타겟으로 하는 도난 범죄들도 같이 늘어나고 있어 이러한 도난 사고를 방지하기 위해 Just-Walk-Out 시스템을 도입하고 고비용의 LiDAR 센서, 가중치 센서 등을 사용하거나 수동으로 지속적인 CCTV 감시를 통해서 확인하고 있다. 하지만 이런 고가의 센서를 많이 사용할수록 점포 운영에 있어 비용 부담이 늘어나게 되고, CCTV 확인은 관리자가 24시간 내내 감시하기 어려워서 사용이 제한적이다. 본 연구에서는 이런 센서들이나 사람에 의지하는 부분을 해결할 수 있고 무인점포에서 사용할 수 있는 저비용으로 도난 등의 이상행동을 하는 고객을 탐지하여 클라우드 기반의 알림을 제공하는 인공지능 영상 처리 융합 알고리즘을 제안하고자 한다. 또한 본 연구에서는 mediapipe를 이용한 모션캡쳐, YOLO를 이용한 객체탐지 그리고 융합 알고리즘을 통해 무인 점포에서 수집한 행동 패턴 데이터를 바탕으로 각 알고리즘들에 대한 정확도를 확인하며 다양한 상황 실험을 통해 융합 알고리즘의 성능을 증명했다.

• 감성과학
• /
• 제12권3호
• /
• pp.259-266
• /
• 2009

오늘날 3D 캐릭터 애니메이션은 실사영화, 애니메이션, 게임, 광고 등 대다수의 영상물에서 쉽게 접할 수 있다. 하지만, 이러한 캐릭터의 부드러운 움직임은 모션캡쳐(Motion Capture)와 같은 고가의 장비를 통해 얻어진 데이터를 숙련된 애니메이터들이 오랜 시간 키 프레임(Key Frame)을 수정함으로써 얻어진다. 경우에 따라서는 애니메이터 개인의 감성적 기준에 따라 제작되어진 캐릭터의 행동이 관객들의 보편적 기대치와 다를 때도 있는데, 이것은 제작되어진 캐릭터의 행동과 관객들의 감성반응에 대한 객관적 관계식이 정립되지 못했기 때문이다. 3D 캐릭터의 걸음걸이를 대상으로 한 본 연구에서는 상기의 관계식 추출과 정립을 위한 실험장비로서 3D Studio MAX Script를 이용한 3차원 회전의 연산 툴을 제안한다. $2{\sim}3$개의 바이패드 데이터 수정과 합성을 주요기능으로 삼고 있는 이 툴을 통해 걸음걸이와 감성반응 사이의 정량적 관계식에 접근하기 위한 다양한 연구가 용이하게 되었다.

• 한국멀티미디어학회논문지
• /
• 제16권2호
• /
• pp.254-268
• /
• 2013

본 논문에서는 마비/편마비 환자의 손 재활운동을 위한 증강현실 인터랙션을 통한 재활운동시스템을 제안한다. 주로 기계적 장치에 의존하고 있는 기존의 마비환자 재활운동시스템에서 가정에서 손쉽게 재활훈련을 수행할 수 있도록 시스템을 구성하기위하여 컴퓨터 비전 기법을 이용하여 재활훈련에 필요한 장비를 최소화하고 좀 더 간편하게 설치하여 사용할 수 있도록 하는데 초점을 맞추었다. 본 논문에서 제안된 방법은 손끝의 움직임과 상태를 손끝마커의 위치와 접촉여부를 검사함으로써 인터랙션 상태를 점검한다. 한대의 카메라로부터 입력되는 손끝 마커의 2차원 위치는 3차원 객체와의 인터랙션을 위하여 ARToolKit 마커를 기반으로 보정된 3차원 카메라 공간상의 좌표로 변환되어 사용된다. 3차원 좌표계로 변환과정을 거친 손끝 마커의 3차원 위치는 3차원 객체와의 인터랙션에 반영함으로써 증강현실 기반의 인터랙션을 구현하였다. 본 논문에서 제시한 인터랙션 기법의 구현내용을 실험결과에서 나타내었고, 증강현실 기반 테이블탑 환경에서 마비환자의 재활운동에 활용될 수 있음을 나타내었다.

• 한국융합학회논문지
• /
• 제11권10호
• /
• pp.355-361
• /
• 2020

스쿼트는 장소에 제약 없이 효과적으로 하체 근력을 증진시킬 수 있는 운동이다. 스쿼트 시 잘못된 자세로 인한 부상이 빈번하게 발생하고 있으며, 부상을 예방하기 위해서는 적절한 각도를 유지하며 운동하는 것이 중요하다. 본 연구에서는 허벅지에 착용된 단일 관성 센서 모듈을 이용하여 스쿼트 각도를 측정할 수 있는 시스템을 개발하고 검증하였다. 스쿼트 각도를 측정하기 위해 각 관성 센서(가속도 센서, 자이로 센서)의 장단점을 상호 보완 하는 상보필터 알고리즘을 사용하였고, 임상 실험을 통해 각 상보필터 계수에 따른 스쿼트 각도의 정확도를 평가하였다. 분석 결과, 최적의 상보필터 계수를 기반으로 계산된 스쿼트 각도는 측각기에서 측정한 각도와 상관 계수 0.623와 편향 오차 -5.6°로 유의한 상관관계를 보였다.

• 만화애니메이션 연구
• /
• 통권13호
• /
• pp.199-210
• /
• 2008

이 논문은 프랑스의 장편 애니메이션 르네상스의 미학적 분석을 시도한다. 애니메이션은 '이미지 서사'이므로, 이미지만을 분석하거나 또는 이미지와 무관한 이야기만을 분석할 수 없다. 따라서 이 논문에서는 작품 분석의 하나의 표본으로써, 작품제작의 콘텍스트와 스토리 라인, 이미지의 특성들, 내용적 측면에서의 특성들, 그리고 이를 모두 포괄하는 미학적 특성들이라는 측면으로 접근하려 한다. 이러한 순차적인 접근은 하나의 작품을 평가하는 데 있어서 어떤 부분이 어떤 식으로 탁월하거나 또는 반복적이라는 점을 지적함으로써 작품에 대한 전체적인 평가를 허용한다. 마지막으로, 이러한 접근 방식이 지니는 한계점에 대해서도 지적한다.

• 한국멀티미디어학회논문지
• /
• 제11권11호
• /
• pp.1575-1591
• /
• 2008

본 논문에서는 스테레오 카메라로부터 신체 중 발의 3차원 가상 모델을 실시간으로 합성할 수 있도록 동작을 검출하는 새로운 방법을 제안한다. 발에 가상 모델을 같은 위치에 합성하려면 관절의 움직임을 일정하게 추적하는 움직임 검출 과정이 필수적이다. 복잡한 움직임 속에서의 정확한 정합 이 기술이 해결해야 할 가장 중요한 문제이다. 본 논문에서는 두 가지 형태의 마커 그룹을 사용한 동적 정합을 제안한다. 바닥의 평면 정보는 발과 3차원 가상 발 모델의 관계를 조정하고 발의 자세와 위치를 측정한다. 발의 회전은 발등의 중심 골격에 따라 부착한 두 개의 마커(Marker) 그룹을 사용하여 추정했다. 이 논문에서는 제안한 시스템을 직접 구현하고, 다양한 실험을 통해 시스템에 적용된 각 알고리즘의 정확도를 측정했다.