Face Detection and Recognition in MPEG Compressed Video

MPEG 압축 비디오 상에서의 얼굴 영역 추출 및 인식

  • 여창욱 (고려대학교 인공시각연구센터) ;
  • 유명현 (고려대학교 인공시각연구센터)
  • Published : 2000.06.01

Abstract

In this paper we present a face recognition and face detection algorithm in MPEG compressed video. The proposed method consists three stage of processing steps. The first step is to produce a spatially reduced DC image form MPEG compressed video for processing. And the second step is face detection on reduced DC image. Finally, the last step is face recognition on partially extracted compressed frames which contain the detected faces. The spatially reduced DC image is produced from two dimensional inverse DCT of the DC coefficient and the first two AC coefficients. The face detection is performed on DC image and face recognition is performed on one extracted frame per GOP by using the K-L transform. In order to evaluate the proposed method, we carried out experiments on video database. The experiment results show the proposed method is very efficient and helpful for target tasks.

본 논문에서는 MPEG 압축 비디오 상에서 얼굴 영역을 추출하고 이를 인식하는 방법에 대하여 제안한다. 제안된 방법은 크게 MPEG 압축 비디오의 처리를 위한 축소된 DC 영상의 구성단계, 축소된 DC 영상에서의 얼굴 영역 추출 단계, 그리고 얼굴 영역이 추출된 프레임에 대한 압축 복원 및 얼굴 인식의 3단계로 구성되어 있다. DC 영상의 구성 단계에서는 압축 복원 없이 DCT 계수의 DC 값과 2개의 AC 값만을 사용하여 부분적인 2차원 역 DCT 변환을 이용한 방법을 사용하였으며, 얼굴 영역 추출 단계에서는 DC 영상에 대해 얼굴의 색상 및 형태 정보를 이용한 얼굴 후보 영역 추출 방법과 K-L 변환 및 역 변환의 오차에 의한 얼굴 영역 추출 방법을 사용하였다. 얼굴 인식 단계에서는 얼굴 영역이 추출된 프레임에 대하여 GOP 단위의 압축 복원을 수행한 후 고유 얼굴 영상을 이용한 방법으로 얼굴 인식을 수행하였다. 제안된 방법의 성능을 검증하기 위하여 뉴스와 드라마 MPEG 비디오를 대상으로 실험을 수행하였으며, 실험 결과 제안된 방법이 효율적임을 알 수 있었다.

Keywords

References

  1. Proc. of SPIE conf. on Visual Communication and Image Processing'97 v.3024 Digital Video Blue Screen Domain Shen, B.;Sethi, I. K.;Bhaskaran, V.
  2. Proc. of ACM Multimedia Conf. nov. VideoQ - An Automatic Content-Based Video Search System using Visual Cues Chang, S. F.;Chen, W.;Meng, H. J.;Sundaram, H.;zhong, D.
  3. Proc. of ICASSP'93 April A New Approach to Decoding and Compositing Motion-Compensated DCT-Based Images Chang, S. F.;Messerschmitt, D. G.
  4. Proc. of SPIE Conf. on Digital Video Compression : Algorithms and Technologies v.2419 Scene Change Detection in a MPEG Compressed Video Sequences Meng, J.;Juan, Y.;Chang, S. F.
  5. Proc. of SPIE Conf. on Multimedia Storage and Archiving Systems v.2916 Archiving, Indexing, and Retrieval of Video in the Compressed Domain Kobola, V.;Doermann, D. S.;Lin, K. L.
  6. Proc. of SPIE Conf. on Digital Video Compression: Algorithms and Technologies v.2688 Visual Content Highlighting via Automatic Extraction of Enbedded Captions on MPEG Compressed Video Yeo, B. L.
  7. Proc. of First Int. Conf. on Multimodal Systems and Technologies Content-Based Parsing in Video Database Wei, Q.;Zhong, Y. Z.
  8. IEEE Trans. on Circuit and Systems for Video Technology, special issue on Multimedia Systems and Technologies A Highly Efficient System for Automatic Face Region Detection in MPEG Video Wang, H.;Chang, S. F.
  9. 한국정보과학회 가을학술발표회 발표논문집 얼굴 영상의 이해를 위한 복잡한 배경에서의 정면 얼굴 영역의 실시간 추출 이미숙;이성환
  10. Proc. of 5th Int. Conf. on Computer vision Face Detection by Fuzzy Pattern Matching Chen, Q.;Wu, H.;Yachida, M.
  11. Proc. of IEEE Computer Society Conf. on Computer Vision and Pattern Recognition Neural Network-Based Face Detection Rowley, H. A.;Baluja, S.;Kanade, T.
  12. Proc. of Int. Conf. on Image Processing Extraction of Facial Regions and Features using Color and Shape Information Sobottka, K.;Pitas, I.
  13. Journal of Cognitive Neuroscience v.3 no.1 Eigenfaces for Recognition Turk, M.;Pentland, A.
  14. Proc. of Int. Workshop on Automatic Face-and Gesture-Recognition Extraction of Facial Images from Complex Background using Color Information and SGLD Matrices Dai, Y.;Nakano, Y.
  15. Proc. of Int. Workshop on Automatic Face-and Gesture-Recognition ZN-Face: A System for Access Control using Automatic Face Recognition Konen, W.;Ekkehard, S.
  16. IEEE Trans. on Neural Networks v.8 no.1 Face Recognition/Detection by Probabilistic Decision-Based Neural Network Lin, S. H.;Kang, S. Y.;Lin, L. J.