• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2009년도 IWAIT
• /
• pp.290-293
• /
• 2009

In this paper, we propose a method to estimate pointing region in real-world from images of cameras. In general, arm-pointing gesture encodes a direction which extends from user's fingertip to target point. In the proposed work, we assume that the pointing ray can be approximated to a straight line which passes through user's face and fingertip. Therefore, the proposed method extracts two end points for the estimation of pointing direction; one from the user's face and another from the user's fingertip region. Then, the pointing direction and its target region are estimated based on the 2D-3D projective mapping between camera images and real-world scene. In order to demonstrate an application of the proposed method, we constructed an ICGS (interactive cinema guiding system) which employs two CCD cameras and a monitor. The accuracy and robustness of the proposed method are also verified on the experimental results of several real video sequences.

• 대한전자공학회논문지SP
• /
• 제45권2호
• /
• pp.29-36
• /
• 2008

본 논문에서는 취득된 영상으로부터 실세계 지시 영역을 추정하는 방법을 제안한다. 일반적으로 사람은 무엇인가를 지시할 경우, 얼굴 방향을 목표물에 두게 된다. 따라서 얼굴영역과 손끝 영역을 연결한 직선을 지시방향이라 간주하였다. 먼저, 제안된 알고리듬은 2대의 카메라로부터 실시간으로 얻어진 영상에서 피부색 검출을 통해 사용자의 얼굴 및 손끝영역에서 2점을 추출하고, 이를 실세계 3차원 기하학 정보를 이용하여 지시방향 및 지시영역을 추정한다. 또한 제안된 알고리듬을 이용한 정확한 지시영역 추출을 기반으로 두 대의 카메라와 한 대의 빔 프로젝터로 구성된 '양방향 영화정보 안내 시스템(ICIGS: Interactive Cinema Information Guiding System)'을 구성하여 제안된 알고리듬의 실용화 가능성을 확인하였다.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2007년도 하계종합학술대회 논문집
• /
• pp.353-354
• /
• 2007

This paper proposes the method which estimates the pointing region at the real world. This paper uses the technique to easily calibrate a camera of Z. Zhang. First, we calculate the projection matrix of each camera by the technique. Next, we estimate the location of the shoulder and the fingertip. Then we compute the pointing region in 3D real world by using projection matrix of each camera. Experiment result showed that the error between estimated point and the plane center point is less than 5cm.

• 로봇학회논문지
• /
• 제4권2호
• /
• pp.139-146
• /
• 2009

This paper describes how a person extracts a unknown object with pointing gesture while interacting with a robot. Using a stereo vision sensor, our proposed method consists of two stages: the detection of the operators' face, the estimation of the pointing direction, and the extraction of the pointed object. The operator's face is recognized by using the Haar-like features. And then we estimate the 3D pointing direction from the shoulder-to-hand line. Finally, we segment an unknown object from 3D point clouds in estimated region of interest. On the basis of this proposed method, we implemented an object registration system with our mobile robot and obtained reliable experimental results.

• 전자공학회논문지CI
• /
• 제46권1호
• /
• pp.128-135
• /
• 2009

동영상에서 시공간상 일정한 위상을 갖는 윤곽선을 정합시켜 물리적 공간에서의 동일한 위치를 추적하는 방법은 명암이 일정한 윤곽선을 정합시키거나 일정한 명암을 전제로 추적하는 방법에 비해 정확성이 높고 조명조건에 대해 안정된 특성이 있다. 본 논문에서는 이러한 성질을 이용하여 조명변화와 노이즈에 강인하게 카메라의 움직임을 추정하는 기법을 소개한다. 우선, 가버 필터뱅크를 사용하여 공간적으로 여과된 연속영상으로부터 계산된 위상의 크기를 기반으로 필터의 방향과 수직인 곳의 광류를 구한 후, 최소제곱법을 적용하여 어파인 모델에 상응하는 카메라의 움직임 파라미터를 구한다. 실험을 통하여 이러한 방법은 조명조건의 변화를 야기하는 디스플레이 기기를 피사체로 하여 카메라의 위치변화를 추정하는 방식의 영상기반 포인팅 디바이스에도 적용될 수 있음을 보인다.

• 대한전자공학회논문지SP
• /
• 제47권3호
• /
• pp.61-69
• /
• 2010

본 논문에서는 행동 탐지 기반으로 사람의 지시행위를 인식하여 지시방향의 객체를 선택하고 이를 추적하는 시스템을 제안한다. 일반적으로 사람은 무엇인가를 지시할 경우, 얼굴 방향을 목표물에 두게 된다. 따라서 얼굴과 손끝을 연결한 직선을 지시방향이라 간주하고, 지시된 객체를 선택한다. 제안된 알고리듬에서는 카메라를 통해 입력된 영상으로부터 움직임 영역을 검출하기 위해 배경 차분을 사용하여 실시간으로 관심 객체의 움직임을 추출한다. 보행 여부의 판단은 주성분(PCA) 분석과 객체의 움직임 변위로 결정되며, 이 때 사람이 정지 상태면, 머리를 기준으로 손에 이르는 벡터 관계를 계산하여 사용자의 지시방향을 최종적으로 결정한다. 실험결과를 통하여 다시점 카메라를 이용한 다각도의 영상에서 사람의 지시 방향을 정확하게 추정해 냄으로서 제안된 알고리즘의 유효성을 검증하였다.

• 한국인터넷방송통신학회논문지
• /
• 제20권6호
• /
• pp.175-182
• /
• 2020

비접촉식 시선추적 기술은 인간과 컴퓨터간의 인터페이스로서 장애가 있는 사람들에게 핸즈프리 통신을 제공하며, 최근 코로나 바이러스 등으로 인한 비접촉시스템에도 중요한 역할을 할 것으로 기대된다. 따라서 본 논문에서는 인간 중심의 상호 작용을 위한 상황인식 다중영역 분류기 및 ASSL 알고리즘을 기반으로 한 사용자 인터페이스 기술을 개발한다. 이전의 AdaBoost 알고리즘은 안구 특징 사이의 공간적 맥락 관계를 이용할 수 없기 때문에 눈의 커서 포인팅 추정을 위한 안면 추적에서 충분히 신뢰할 수 있는 성능을 제공 할 수 없다. 따라서 본 논문에서는 효율적인 비접촉식 시선 추적 및 마우스 구현을 위한 눈 영역의 상황기반 AdaBoost 다중 영역 분류기를 제시한다. 제안된 방식은 여러 시선 기능을 감지, 추적 및 집계하여 시선을 평가하고 온 스크린 커서 기반의 능동 및 반 감독 학습을 조정한다. 이는 눈 위치에 성공적으로 사용되었으며 눈 특징을 감지하고 추적하는 데에도 사용할 수 있다. 사용자의 시선을 따라 컴퓨터 커서를 제어하며 칼만 필터를 이용하여 실시간으로 추적하며, 가우시안 모델링을 적용함으로써 후처리하였다. Fits law에 의해 실험하였으며, 랜덤하게 대상객체를 생성하여 실시간으로 시선추적성능을 분석하였다. 제안하는 상황인식을 기반 인식기를 통하여 비접촉 인터페이스로서의 활용이 높아질 것이다.