Real-Time Face Tracking System for Portable Multimedia Devices

휴대용 멀티미디어 기기를 위한 실시간 얼굴 추적 시스템

  • Yoon, Suk-Ki (School of Information and Communication Engineering, Sungkyukwan University) ;
  • Han, Tae-Hee (School of Information and Communication Engineering, Sungkyukwan University)
  • 윤석기 (성균관대학교 정보통신공학부) ;
  • 한태희 (성균관대학교 정보통신공학부)
  • Published : 2009.09.25

Abstract

Human face tracking has gradually become an important issue in applications for portable multimedia devices such as digital camcorder, digital still camera and cell phone. Current embedded face tracking software implementations lack the processing abilities to track faces in real time mobile video processing. In this paper, we propose a power efficient hardware-based face tracking architecture operating in real time. The proposed system was verified by FPGA prototyping and ASIC implementation using Samsung 65nm CMOS process. The implementation result shows that tracking speed is less than 8.4 msec with 150K gates and 20 mW average power consumption. Consequently it is validated that the proposed system is adequate for portable multimedia device.

사람의 얼굴 추적은 디지털 캠코더, 디지털 카메라, 휴대폰 등과 같은 휴대용 멀티미디어 장치에 대해 점차 중요한 이슈가 되어 왔다. 갈수록 확대되어 가는 얼굴 추적 응용 서비스 요구에 대해 소프트웨어 구현 대응은 성능 및 전력 소모 면에서 한계가 있다. 따라서 본 논문에서는 실시간으로 동작할 수 있는 하드웨어 기반의 저전력 얼굴 추적 시스템을 제안하고자 한다. 제안된 시스템은 FPGA 프로토타이핑과 삼성 65nm CMOS 공정으로 구현하여 검증하였고, 8.4 msec 미만의 추적 속도와 15만 게이트의 크기를 가지며 평균 20 mW의 동작 전력소모를 보여 실시간으로 동작하는 저전력 휴대용 멀티미디어 기기에 적합함을 입증하였다.

Keywords

References

  1. Viola and Jones, Robust real-time object detection, International Journal of Computer Vision, Volume 57, issue 2, pp. 137-154, May 2004 https://doi.org/10.1023/B:VISI.0000013087.49260.fb
  2. Dorin Comaniciu, Kernel-Based Object Tracking, IEEE Transactions on pattern analysis and machine intelligence, Volume 25, issue 5, pp.564-577, MAY 2003 https://doi.org/10.1109/TPAMI.2003.1195991
  3. Chang Huang, Vector boosting for rotation invariant multi-view face detection, The Tenth IEEE International Conference on Computer Vision(ICCV'05), Volume 1, pp. 446-453, 17-21 Oct. 2005 https://doi.org/10.1109/ICCV.2005.246
  4. WIng-pong Choi, Kini-Man Lam, An Effective Shape-Texture Weighted Algorithm for Multi-view Face Tracking in Videos, Congress on Image and Signal Processing (CISP'08), Volume 4, pp. 156-160, May 2008 https://doi.org/10.1109/CISP.2008.152
  5. Kim jung-bae, 비디오 영상 트레킹 방법 및 장치, 대한민국특허청, 10-200700011122, Mar, 2008
  6. 이수현, 얼굴 검출을 위한 SoC 하드웨어 구현 및 검증, 전자공학회 논문지 제 44권 SD편 제4호, pp.43-54, April 2007
  7. http://www.sequencedesign.com/image/files/powertheatecdatasheet.pdf