대한전자공학회논문지SP (Journal of the Institute of Electronics Engineers of Korea SP)

대한전자공학회 (The Institute of Electronics and Information Engineers)
권호 표지

실세계 3차원 기하학 정보를 이용한 실시간 지시영역 추정 시스템의 구현 및 응용

Real-time Implementation and Application of Pointing Region Estimation System using 3D Geometric Information in Real World

  • 한윤상 (중앙대학교 첨단영상대학원 첨단영상학과) ;
  • 서융호 (중앙대학교 첨단영상대학원 첨단영상학과) ;
  • 두경수 (중앙대학교 첨단영상대학원 첨단영상학과) ;
  • 김진태 (한서대학교 컴퓨터정보학과) ;
  • 최종수 (중앙대학교 첨단영상대학원 첨단영상학과)
  • Han, Yun-Sang (Dept. of Image Engineering, GSAIM, Chung-Ang University) ;
  • Seo, Yung-Ho (Dept. of Image Engineering, GSAIM, Chung-Ang University) ;
  • Doo, Kyoung-Soo (Dept. of Image Engineering, GSAIM, Chung-Ang University) ;
  • Kim, Jin-Tae (Dept. of Computer Information Science, Han-Seo University) ;
  • Choi, Jong-Soo (Dept. of Image Engineering, GSAIM, Chung-Ang University)
  • 발행 : 2008.03.25
PDF 다운로드
⟨ 이전 논문 다음 논문 ⟩

초록

본 논문에서는 취득된 영상으로부터 실세계 지시 영역을 추정하는 방법을 제안한다. 일반적으로 사람은 무엇인가를 지시할 경우, 얼굴 방향을 목표물에 두게 된다. 따라서 얼굴영역과 손끝 영역을 연결한 직선을 지시방향이라 간주하였다. 먼저, 제안된 알고리듬은 2대의 카메라로부터 실시간으로 얻어진 영상에서 피부색 검출을 통해 사용자의 얼굴 및 손끝영역에서 2점을 추출하고, 이를 실세계 3차원 기하학 정보를 이용하여 지시방향 및 지시영역을 추정한다. 또한 제안된 알고리듬을 이용한 정확한 지시영역 추출을 기반으로 두 대의 카메라와 한 대의 빔 프로젝터로 구성된 '양방향 영화정보 안내 시스템(ICIGS: Interactive Cinema Information Guiding System)'을 구성하여 제안된 알고리듬의 실용화 가능성을 확인하였다.

In this paper we propose a real-time method to estimate a pointing region from two camera images. In general, a pointing target exists in the face direction when a human points to something. Therefore, we regard the direction of pointing as the straight line that connects the face position with the fingertip position. First, the method extracts two points in the face and the fingertips region by using detecting the skin color of human being. And we used the 3D geometric information to obtain a pointing detection and its region. In order to evaluate the performance, we have build up an ICIGS(Interactive Cinema Information Guiding System) with two camera and a beam project.

키워드

참고문헌

  1. A. Pentland, 'Looking at people: Sensing for Ubiquitous and Wearable Computing', IEEE Trans. on Pattern Analysis and Machine Intelligence, Vol.22, No.1, pp.107-119, 2000 https://doi.org/10.1109/34.824823
  2. R. Cipolla, P. A. Hadfiels and N. J. Hollinghurst, 'Uncalibrated stereo vision with pointing for man-machine interface', Proc. of IAPR workshop on Machine Vision Application, pp.163-166, 1994
  3. N. Jojic, B. Brumitt, B. Meyers, S. Harris, 'Detection and Estimation od Pointing Gestures in Dense Disparity Maps', Proc. of International Conference on Automatic Face and Gesture Recognition, pp.468-475, 2000
  4. H. Watanabe, H. Hongo, K. Yamamoto, 'Estimation of Omni-Directional Pointing Gestures using Multiple Camera', IEE of Japan, Vol.121-C, No.9, pp.1388-1394, 2001
  5. T. Yamaguchi, E. Sato, 'Humantronics and RT-Middleware', Advances in Information Processing and Protection, Springer, 2007
  6. R. Hartley, A. Zisserman, 'Multiple View Geometry', Cambridge Univ. Press, 2000
  7. Z. Zhang, 'A flexible new technique for camera calibration', IEEE Trans. on Pattern Analysis and Machine Intelligence, Vol. 22, No. 11, 1330-1334, 2000 https://doi.org/10.1109/34.888718
  8. S. E. Kim, C. J. Park, I. H. Lee, 'A Tracking Method of End-effectors in a Vision-based Marker-free Motion Capture System', IEEE Conf. on Cybermatics and Intelligent Systems, Vol. 1, 129-134, 2004
  9. J. Yang, W. Lu, A. Waibel, 'Skin Color Modeling and Adaptation', (CMU-CS-97-146), CS Department, CMU, PA, U.S.A., 1997
  10. S. Kr. Singh, D. S. Chauhan, M. Vatsa, R. Singh, 'A Robust Skin Color Based Face Detection Algorithm, Tamkang Journal of Science and Engineering', Vol. 6, No. 4, pp. 227-234, 2003
  11. Y. S. Han, Y. H. Seo, K. S. Doo, J. S. Choi, 'The Real World Pointing Region Estimation System using 3D Geometry Information', in Proc. ITC-CSCC2007, Vol. 3, pp. 1111-1112, 2007