• 제목/요약/키워드: 3D Human Pose

검색결과 73건 처리시간 0.029초

포즈 추정을 통한 3D 휴먼 모델의 애니메이팅 구현 (Implementation of animation of 3D human model through pose estimation)

  • 장예원;박병서;박정탁;이솔;서영호
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2022년도 하계학술대회
    • /
    • pp.190-191
    • /
    • 2022
  • 본 논문에서는 RGB-D 카메라와 Mediapipe 모듈을 이용한 신체 추적 및 리깅 프레임 워크를 제안한다. Openpose 및 Mediapipe를 통해 스켈레톤 정보를 추출할 수 있으며, 이 정보를 그래픽스 엔진의 입력으로 사용하여 휴머노이드 아바타 기능을 통해 각 캐릭터의 아바타가 다르더라도 리깅을 구현할 수 있다. 결과적으로 수작업을 통해 리깅을 구현하는 시간을 단축시킬 수 있다. 두 모듈과 RGB-D 카메라를 통해 획득한 3차원 스켈레톤 정보를 통해 실시간으로 사용자를 추적하고 자동 rigging하는 그래픽스 엔진 프레임 워크를 제안한다.

  • PDF

Three-dimensional Head Tracking Using Adaptive Local Binary Pattern in Depth Images

  • Kim, Joongrock;Yoon, Changyong
    • International Journal of Fuzzy Logic and Intelligent Systems
    • /
    • 제16권2호
    • /
    • pp.131-139
    • /
    • 2016
  • Recognition of human motions has become a main area of computer vision due to its potential human-computer interface (HCI) and surveillance. Among those existing recognition techniques for human motions, head detection and tracking is basis for all human motion recognitions. Various approaches have been tried to detect and trace the position of human head in two-dimensional (2D) images precisely. However, it is still a challenging problem because the human appearance is too changeable by pose, and images are affected by illumination change. To enhance the performance of head detection and tracking, the real-time three-dimensional (3D) data acquisition sensors such as time-of-flight and Kinect depth sensor are recently used. In this paper, we propose an effective feature extraction method, called adaptive local binary pattern (ALBP), for depth image based applications. Contrasting to well-known conventional local binary pattern (LBP), the proposed ALBP cannot only extract shape information without texture in depth images, but also is invariant distance change in range images. We apply the proposed ALBP for head detection and tracking in depth images to show its effectiveness and its usefulness.

핵심-포즈 분포 기반 다중 시점에서의 휴먼 행동 인식 (Human Action Recognition in Various Viewpoints with a Key-Pose Distribution)

  • 김선우;석흥일;이성환
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2010년도 한국컴퓨터종합학술대회논문집 Vol.37 No.1(C)
    • /
    • pp.507-511
    • /
    • 2010
  • 휴먼 행동 인식은 크게 3D 모델 기반 방법과 템플릿 기반 방법으로 나눌 수 있다. 3D 모델 기반 방법은 휴먼의 포즈를 3D로 재구성한 뒤 특징을 추출하는 것으로 인식 정확도는 높으나 연산량이 많아 매우 비효율적이다. 반면 템플릿 기반의 방법은 간단하고 수행 시간이 빠르기 때문에 여러 논문들에서 채택되고 있다. 그러나 템플릿을 이용한다는 특성 때문에 시점, 행동 스타일의 변화 등에 따라 실루엣의 변화가 심해 인식 성능에 한계점을 가진다. 본 논문에서는 핵심-포즈들의 히스토그램으로 표현되는 핵심-포즈 분포와 광류의 변화를 이용하여 다중 시점에서의 휴먼 행동 인식 방법을 제안한다. 제안하는 방법은 IXMAS 데이터 셋을 이용한 실험에서 적은 수의 템플릿을 이용하면서도 평균 87.9%의 높은 인식률을 보였다.

  • PDF

HSFE Network and Fusion Model based Dynamic Hand Gesture Recognition

  • Tai, Do Nhu;Na, In Seop;Kim, Soo Hyung
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제14권9호
    • /
    • pp.3924-3940
    • /
    • 2020
  • Dynamic hand gesture recognition(d-HGR) plays an important role in human-computer interaction(HCI) system. With the growth of hand-pose estimation as well as 3D depth sensors, depth, and the hand-skeleton dataset is proposed to bring much research in depth and 3D hand skeleton approaches. However, it is still a challenging problem due to the low resolution, higher complexity, and self-occlusion. In this paper, we propose a hand-shape feature extraction(HSFE) network to produce robust hand-shapes. We build a hand-shape model, and hand-skeleton based on LSTM to exploit the temporal information from hand-shape and motion changes. Fusion between two models brings the best accuracy in dynamic hand gesture (DHG) dataset.

3차원 인체 포즈 추적을 위한 가려짐에 강인한 관측치 모델 (An Occlusion Robust Observation Model for 3D Human Pose Tracking)

  • 조남규;이성환
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2011년도 한국컴퓨터종합학술대회논문집 Vol.38 No.1(C)
    • /
    • pp.390-392
    • /
    • 2011
  • 가려진 상태에 있는 인체 구성요소에 대한 관측치 모델은 영상에서 인체 구성요소가 차지하고 있는 화소들에 대한 정확한 평가를 해야 하는 저수준에서의 문제와, 권투 동작과 같이 역동적으로 변화하는 인체 구성요소 간의 가려짐 관계에 대한 문맥적인 상황을 같이 고려해야 하는 어려움을 갖고 있다. 본 논문에서는 자체 가려짐이 발생한 상황에서도 강인하게 인체 포즈 추적을 하기 위한 가려짐에 강인한 관측치 모델을 제안한다. 포즈 추적 성능을 비교평가 할 수 있는 HumanEva 데이터 셋을 이용하여 제안하는 관측치 모델의 강인함을 확인하였으며, 기존 방법과의 성능 비교에서도 우수한 추적 성능을 보였다.

증강현실에서 3D 객체 조작을 위한 손동작 인터페이스 (Hand Gesture Interface for Manipulating 3D Objects in Augmented Reality)

  • 박건희;이귀상
    • 한국콘텐츠학회논문지
    • /
    • 제10권5호
    • /
    • pp.20-28
    • /
    • 2010
  • 본 논문에서는 증강현실 환경에서 등장하는 3차원 공간상의 객체를 카메라와 손을 사용하여 조작할 수 있는 인터페이스를 제안한다. 일반적으로 3차원 움직임을 검출하기 위해서 마커를 사용하지만, 이러한 경우에는 객체를 등록하기 위해서 마커가 영상 내에 있어야 하며 추가적인 장비를 사용함으로서 몰입감의 저하를 초래한다. 이것을 극복하기 위해서 본 연구에서는 손을 하나의 평면으로 변환하고 손 모양의 변화를 검출하여 마커를 대체하는 방법을 제안한다. 또한 조명으로 인한 손의 색상 변화에 따른 객체의 등록 위치 변화를 칼만 필터를 적용하여 추적하였다. 실험결과, 제안한 알고리즘은 손의 원활한 움직임에 의한 객체의 3차원 조작이 가능함을 보였다.

3차원 하반신 스캔데이터를 이용한 승마바지의 맞음새 분석 (An analysis on the Fit Preferences of Breeches using 3D Lower Body Scan data)

  • 강미정;권영아
    • 한국의류산업학회지
    • /
    • 제15권6호
    • /
    • pp.1000-1009
    • /
    • 2013
  • Well-fitting riding breeches provide a comfortable ride. Horse-riding breeches should fit the lower body with patches located on the inside of hip and knees to prevent tears and slips. This study provides information about the fit of women's breeches using 3D human body scan data wearing commercially available two breeches according to posture. To get information about breeches fit, we measured the angle of waist line, the length, and the area of the breeches fit on four 20's women. This research showed the problem which was down for waist back line in the case of the horseback riding pose. The back waistline of the riding breeches should be raised compared to the front waistline; subsequently, an increased waistline angle results in less back waistline decrease. The breeches have plenty of length from back waist to crotch so the breech fit can be improved. The thigh circumference increased when riding in the front; therefore, good elasticity of the weft direction of the fabric is recommended. The length increase and the peripheral increase of the front knee significantly increased the surface area of the knee; consequently, knee patch material should be a two-way elastic fabric in all directions to enhance comfort according to riding motion.

시-공간 특징을 이용한 효율적인 3차원 인체 자세 재구성 (Efficient Reconstruction of 3D Human Body Pose Using Spatio-Temporal Features)

  • 양희덕;아마드;이성환
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2005년도 가을 학술발표논문집 Vol.32 No.2 (2)
    • /
    • pp.892-894
    • /
    • 2005
  • 본 논문에서는 스테레오 영상에서 깊이 정보를 추출하여 사람의 자세를 학습된 2차원 깊이 영상들의 선형 결함으로 표현하여 3차원 인체 모델을 재구성하는 방법을 제안한다. 한 장의 2차원 깊이 영상으로 최소 제곱법을 이용하여 프로토타입 깊이 영상의 선형 결합으로 표현되는 최적의 계수를 찾을 수 있다. 입력된 깊이 영상의 3차원 인체 모델은 프로토타입 깊이 영상에서 예측된 계수를 적용하여 생성한다. 학습 단계에서는 데이터를 계층적으로 나누어 모델을 생성한다. 또한, 재구성 단계에서는 실루엣 영상과 깊이 영상으로부터 계층적으로 나누어진 학습 데이터를 이용하여 3차원 인체 자세를 재구성한다. 학습 및 재구성의 마지막 단계에서는 실루엣 영상 대신 깊이 영상을 이용하여 3차원 인체 모델을 재구성한다. 한 장의 실루엣 영상을 이용하면 영상의 노이즈에 민감하기 때문에 재구성 단계의 상위 레벨에서는 실루엣 영상의 누적 영상을 이용한다. 실험 결과는 제안된 방법이 효율적으로 3차원 인체 자세를 재구성함을 보여준다.

  • PDF

3 차원 휴먼 자세 추정을 위한 다시점 준지도 학습 (Multi-view semi-supervised learning for 3D human pose estimation)

  • 김도엽;장주용
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2021년도 추계학술대회
    • /
    • pp.134-138
    • /
    • 2021
  • 3 차원 휴먼 자세 추정 모델은 다시점 모델과 단시점 모델로 분류될 수 있다. 일반적으로 다시점 모델은 단시점 모델에 비하여 뛰어난 자세 추정 성능을 보인다. 단시점 모델의 경우 3 차원 자세 추정 성능의 향상은 많은 양의 학습 데이터를 필요로 한다. 하지만 3 차원 자세에 대한 참값을 획득하는 것은 쉬운 일이 아니다. 이러한 문제를 다루기 위해, 우리는 다시점 모델로부터 다시점 휴먼 자세 데이터에 대한 의사 참값을 생성하고, 이를 단시점 모델의 학습에 활용하는 방법을 제안한다. 또한, 우리는 각각의 다시점 영상으로부터 추정된 자세의 일관성을 고려하는 다시점 일관성 손실함수를 제안하여, 이것이 단시점 모델의 효과적인 학습에 도움을 준다는 것을 보인다.

  • PDF

단일 카메라와 평면거울을 이용한 하지 운동 자세 추정 (Human Legs Motion Estimation by using a Single Camera and a Planar Mirror)

  • 이석준;이성수;강선호;정순기
    • 한국정보과학회논문지:컴퓨팅의 실제 및 레터
    • /
    • 제16권11호
    • /
    • pp.1131-1135
    • /
    • 2010
  • 본 논문에서는 고정시킨 평면거울을 바라보는 단일 카메라에서 얻어진 영상을 이용하여 훈련자 양 하지의 자세를 3차원으로 추정하는 방법을 제안한다. 이를 위해, 카메라 입력영상으로부터 평면거울에 부착된 네 개의 적외선 마커를 탐색하여 단일 카메라의 자세를 추정한다. 추정된 카메라 자세를 통해 거울평면을 기준으로 하는 훈련공간을 정의하고, 압력 센서를 사용하여 공간 내의 훈련자의 양 하지 위치를 측정한다. 양 하지의 마커는 직접적으로, 또는 거울을 통해 카메라 영상으로 투영되고, 정의된 훈련 공간에서 3차원 위치로 변환된다. 변환된 마커들의 3차원 위치관계에 의해 최종적으로 양 하지의 자세를 얻고 연속적인 움직임에 대해 운동 상태를 추정한다.