Journal of the Korean Institute of Intelligent Systems (한국지능시스템학회논문지)

Korean Institute of Intelligent Systems (한국지능시스템학회)
권호 표지
DOI QR코드

DOI QR Code

Recording Support System for Off-Line Conference using Face and Speaker Recognition

얼굴 인식 및 화자 정보를 이용한 오프라인 회의 기록 지원 시스템

  • 손윤식 (동국대학교 컴퓨터공학과) ;
  • 정진우 (동국대학교 컴퓨터공학과) ;
  • 박한무 (동국대학교 컴퓨터공학과) ;
  • 계승철 (동국대학교 컴퓨터공학과) ;
  • 윤종혁 (동국대학교 컴퓨터공학과) ;
  • 정낙천 (동국대학교 컴퓨터공학과) ;
  • 오세만 (동국대학교 컴퓨터공학과)
  • Published : 2008.02.25
Download PDF
⟨ Previous Next ⟩

Abstract

Recent multimedia technology has supported various application services based on the development of effective movie compression and network techniques. On-line video conference system is a typical example that use theses two technologies effectively. On-line video conference system can be characterized into an effective conferencing method for long-distanced on-line conference members. But, unfortunately, off-line conference with face-to-face meeting is more frequent than on-line conference and their support systems have not been sufficiently considered. In this paper, we propose a recording support system for off-Line conference using face and speaker recognition. This system finds the speaker in the conference by using three microphones and three webcam cameras. And analysis is done with face region information that gathered by currently active webcam camera, and recognizes the identity of face. Finally, the system tracks speaker and records conference with extract speaker information.

최근 멀티미디어 서비스는 동영상 압축 기술 및 네트워크의 발달을 기반으로 하여 다양한 응용 서비스를 제공하고 있으며, 이 중 화상 회의 시스템은 이 두 가지 기술이 효과적으로 사용된 대표적인 예이다. 원격 사용자간의 원활한 의사전달을 위해 고려된 화상회의 시스템은 효과적인 응용 서비스로 분류되고 있지만, 이러한 서비스 제공을 위한 기술을 이용하여 빈도가 훨씬 많은 일반적인 회의를 지원하는 응용서비스는 드문 편이다. 본 논문에서는 얼굴 정보와 화자 정보를 기반으로 오프라인 회의를 보조하는 시스템을 제안한다. 제안된 시스템은 3개의 마이크와 웹캠을 이용하여 화자의 위치를 파악하고 웹캠에서 얻어진 정보를 이용하여 얼굴 영역 정보를 분석하고 인식한 후 화자 정보를 추출하여 발언자들을 추적하여 기록하는 기능을 제공한다.

Keywords

References

  1. D. Chai and K.N. Ngan, "Face segmentation using skin-color map in videophone applications," Circuits and Systems for Video Technology, IEEE Transactions on, Vol. 9, No. 4, pp. 551-564, 1999 https://doi.org/10.1109/76.767122
  2. Y. Wang, and B. Yuan, "A novel approach for human face detection from color images under complex background," Pattern Recognition, Vol. 34, No. 10, pp. 1983-1992, 2001 https://doi.org/10.1016/S0031-3203(00)00119-9
  3. I.S. Hsieh,, K.C. Fan, and C. Lin, "A statistic approach to the detection of human faces in color nature scene," Pattern Recognition, Vol. 35, No. 7, pp. 1583-1596, 2002 https://doi.org/10.1016/S0031-3203(01)00146-7
  4. 이재원, 박선영, 강병두, 김종호, 권오화, 성치영, 김상균, "복잡한 영상에서의 영역 분할을 이용한 얼굴 검출," 멀티미디어학회논문지, Vol. 9, No. 2, pp. 160-171, 2006
  5. Y. Deng, and B.S. Manjunath, "Unsupervised segmentation of color-texture regions in images and video," IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 23, No. 8, pp. 800-810, 2001 https://doi.org/10.1109/34.946985
  6. Y. Deng, , C. Kenney, M.S. Moore, B. S. Manjunath, "Peer group filtering and perceptual color image quantization," Circuits and Systems, 1999. ISCAS'99. Proceedings of the 1999 IEEE International Symposium on, Vol. 4, No. pp. 21-24, 1999
  7. E. Hjelmas, and B.K. Low, "Face detection: A survey," Computer Vision and Image Understanding, Vol. 83, No. 3, pp. 236-274, 2001 https://doi.org/10.1006/cviu.2001.0921
  8. R. Lienhart, and J. Maydt, "An extended set of Haar-like features for rapid object detection," Image Processing. 2002. Proceedings. 2002 International Conference on, Vol. 1, No. pp. 900-903, 2002
  9. P. Viola, and M. Jones, "Rapid object detection using a boosted cascade of simple features," Proc. CVPR, Vol. 1, No. pp. 511-518, 2001
  10. H. Schneiderman, and T. Kanade, "Object Detection Using the Statistics of Parts," International Journal of Computer Vision, Vol. 56, No. 3, pp. 151-177, 2004 https://doi.org/10.1023/B:VISI.0000011202.85607.00
  11. 이병선, 고성원, 권혁봉, "영상회의를 위한 화자 검출 시스템," 조명.전기설비학회논문지, Vol. 17, No. 5, pp. 68-79, 2003
  12. P. Delmas, P.Y. Coulon, and V. Fristot, "Automatic snakes for robust lip boundaries extraction," Acoustics, Speech, and Signal Processing, 1999. ICASSP'99. Proceedings., 1999 IEEE International Conference on, Vol. 6, No. pp. 3069-3072, 1999
  13. J. Canny, "A computational approach to edge detection," IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 8, No. 6, pp. 679-698, 1986 https://doi.org/10.1109/TPAMI.1986.4767851