Exploiting Person-identity Features for Person-based Photo Indexing

인물 기반 사진 색인을 위한 인물 특징 값 개발에 관한 연구

  • Yang Seung-Ji (Image and Video Systems Lab., School of Engineering, Information and Communications Univ.(ICU)) ;
  • Seo Kyong-Sok (Image and Video Systems Lab., School of Engineering, Information and Communications Univ.(ICU)) ;
  • Ro Yong-Man (Image and Video Systems Lab., School of Engineering, Information and Communications Univ.(ICU)) ;
  • Kim Sang-Kyun (Computing Lab., Samsung Advanced Institute of Technology(SAIT))
  • 양승지 (한국정보통신대학교 공학부 영상비디오시스템연구실) ;
  • 서경석 (한국정보통신대학교 공학부 영상비디오시스템연구실) ;
  • 노용만 (한국정보통신대학교 공학부 영상비디오시스템연구실) ;
  • 김상균 (삼성종합기술원 컴퓨팅연구실)
  • Published : 2006.03.01

Abstract

In this paper, a novel approach is addressed to facilitate the browsing of large collection of digital photos associated with specified person(s) in the photos. The goal of the proposed method is to exploit additional person-identity features as incorporating facial regions and peripheral clothes region associated with them. For more effective incorporation of the clothes and facial features, situation-based photo clustering is also proposed. To evaluate the efficacy of the proposed method experiment was performed with 1120 generic home photos. The experiment results showed that the proposed method outperformed the conventional method us El.g only face feature as showing the average performance of about 92% contrary to the average performance of about 70% in the conventional method.

본 논문에서는 일련의 디지털 사진들을 특정한 인물에 기반하여 브라우징 하는 것을 돕기 위한 인물 기반 사진 색인 방법을 제안한다. 기존의 인물 기반 영상 색인의 경우, 얼굴 특징값만을 인물 특정값으로 이용하였다. 이에 반하여, 제안하는 방법의 주 된 목적은 얼굴의 주변 정보인 상황 및 옷 정보를 얼굴 정보와 함께 조합하여 색인 과정에 활용함으로써 인물 기반 사진 색인 의 성능을 높이는 것이다 얼굴 특정값과 옷 특징값을 효과적으로 조합하기 위해, 인물을 상황 별로 클러스터링하는 방법이 함께 제안된다 본 논문에서 제안하는 방법의 효용성을 검증하기 위해 1120 장의 사진 데이터베이스를 활용하여 실험을 수행하였다. 실험 결과에서, 기존의 방법에서처럼 얼굴 특정값만을 이용하여 색인을 수행한 경우 약 70%의 평균 성능을 보였으며, 제안 된 방법을 이용하여 색인을 수행한 경우 약 92%의 평균 성능을 보여 제안된 방법이 인물 별 사진 색인에 효과적임을 확인할 수 있었다.

Keywords

References

  1. D. Frohlich, A. Kuchinsky, C. Pering, A. Don, and S. Ariss, 'Requirement for photoware,' Proc. of the 2002 ACM Conf. on Computer Supported Cooperative Work, pp.166-175, 2002
  2. Kerry Rodden and Kenneth R. Wood,'How do people manage their digital photographs,' Proc. of the SIGCHI Conf. on Human Factors in Computing Systems, pp.409-416, 2003
  3. M.H. Yang, D. Kriegman, and N. Ahuja, 'Detection Faces in Images: A Survey,' IEEE Trans. on PAMI, pp.34-58, 2002
  4. W. Zhao, R. Chellappa, P.J. Phillips, and A. Rosenfeld, 'Face Recognition: A Literature Survey,' ACM Computing Surveys, pp.399-458, 2003 https://doi.org/10.1145/954339.954342
  5. L. Ahang, L. Chen, M. Li, and H. Zhang, 'Automated Annotation of Human Faces in Family Albums,' Proc. of the 11th ACM Conf. on Multimedia, pp.355-358, 2003
  6. 'Exchangeable image file format for digital still cameras: Exif Version 2.2 (JEITA CP-3451),' Standard of Japan Electronics and Information Technology Industries Association, 2002
  7. R.O. Duda, P.E. Hart, D.G. Stork, 'Pattern Classification,' John Wiley & Sons, LTD, 2001
  8. V.N. Vapnik, 'The Nature of Statistical Learning Theory,' Springer, 1999
  9. M. Bober, S.K. Bober, 'Description of MPEG-7 Visual Core Experiments,' MPEG-7 Visual Group ISO/IEC JTC1/SC29/ WG11, N6905, 2005
  10. T. Kamei, A. Yamada, H. Kim, T.K. Kim, W. Hwang, S.C. Kee, 'Advanced Face Descriptor Using Fourier and Intensity LDA Features,' ISO/IEC JTC1/SC29/WG11, M8998, 2002
  11. B.S. Manjunath, P. Salembier, and T. Sikora, 'Introduction to MPEG-7,' John Wiley and Sons, LTD, 2002
  12. B. Schlkopf and A. Smola, 'Learning with Kernels: Support Vector Machines, Regularization, Optimization, and Beyond,' MIT Press, 2002