DOI QR코드

DOI QR Code

Detection and Blocking of a Face Area Using a Tracking Facility in Color Images

컬러 영상에서 추적 기능을 활용한 얼굴 영역 검출 및 차단

  • 장석우 (안양대학교 소프트웨어학과)
  • Received : 2020.09.02
  • Accepted : 2020.10.05
  • Published : 2020.10.31

Abstract

In recent years, the rapid increases in video distribution and viewing over the Internet have increased the risk of personal information exposure. In this paper, a method is proposed to robustly identify areas in images where a person's privacy is compromised and simultaneously blocking the object area by blurring it while rapidly tracking it using a prediction algorithm. With this method, the target object area is accurately identified using artificial neural network-based learning. The detected object area is then tracked using a location prediction algorithm and is continuously blocked by blurring it. Experimental results show that the proposed method effectively blocks private areas in images by blurring them, while at the same time tracking the target objects about 2.5% more accurately than another existing method. The proposed blocking method is expected to be useful in many applications, such as protection of personal information, video security, object tracking, etc.

최근 들어, 동영상의 간편한 촬영 그리고 인터넷을 통한 동영상의 보급 및 시청이 기하급수적으로 늘어남에 따라서 개인 정보의 외부 노출로 인한 피해가 발생하고 있다. 본 논문에서는 연속적으로 들어오는 영상으로부터 사람의 개인 정보가 노출된 목표 객체 영역을 강인하게 추출한 다음, 추출된 객체를 위치 예측 알고리즘을 이용해 빠르게 추적하면서 영상 블러링 기법을 통해 동시에 블로킹하는 새로운 방법을 제안한다. 본 논문에서는 먼저 입력받은 컬러 영상으로부터 개인 정보 영역이 노출된 목표 객체 영역을 인공 신경망 기반의 학습 알고리즘을 이용하여 정확하게 추출한다. 그런 다음, 검출된 객체를 위치 예측 알고리즘을 이용하여 빠르게 추적하면서 영상 블러링을 적용하여 블로킹한다. 실험 결과에서는 제안된 방법이 받아들인 다양한 종류의 컬러 영상 데이터로부터 개인 정보가 노출된 목표 객체를 기존 방법에 비해 2.5% 보다 정확하게 추적하면서 동시에 블러링함으로써 개인 정보 영역을 효과적으로 차단한다는 것을 보여준다. 본 논문에서 제안된 물체 차단 방법은 개인 정보의 보호, 비디오 감시 및 보안, 객체 검출 및 추적 등과 같은 많은 실제적인 응용 분야에서 유용하게 활용될 수 있을 것으로 기대된다.

Keywords

References

  1. Y. Liu, Y. Wang, K. Zhou, Y. Yang, and Yifei Liu, "Semantic-aware Data Quality Assessment for Image Big Data," Future Generation Computer Systems, Vol.102, pp.53-85, January 2020. DOI: https://doi.org/10.1016/j.future.2019.07.06
  2. D.-S. Hong, H.-H. Chen, P.-Y. Hsiao, L.-C. Fu, and S.-M. Siao, "CrossFusion Net: Deep 3D Object Detection Based on RGB Images and Point Clouds in Autonomous Driving," Image and Vision Computing, Vol.100, pp.1-13, August, 2020. DOI: https://doi.org/10.1016/j.sysarc.2020.101766
  3. R. Dahl, M. Norouzi, and J. Shlens, "Pixel Recursive Super Resolution," In Proc. of the IEEE International Conference on Computer Vision (ICCV), pp. 5449-5458, Oct. 2017. DOI: https://doi.org/10.1109/ICCV.2017.581
  4. Z. Zakaria, S. A. Suandi, and J. Mohamad-Saleh, "Hierarchical Skin-AdaBoost-Neural Network (H-SKANN) for Multi-Face Detection," Applied Soft Computing, Vol.68, pp.172-190, July 2018. DOI: https://doi.org/10.1016/j.asoc.2018.03.030
  5. J. Liu, L. Huang, and J. Lin, "An Image Mosaic Block Detection Method Based on Fuzzy C-Means Clustering," In Proc. of the IEEE International Conference on Computer Research and Development (ICCRD), Vol.1, pp. 237-240, Mar. 2011. DOI: https://doi.org/10.1109/ICCRD.2011.5764011
  6. H. Zhang, X. Wang, J. Zhu, C.-C. Jay Kuo, "Fast Face Detection on Mobile Devices by Leveraging Global and Local Facial Characteristics," Signal Processing: Image Communication, Vol.78, pp.1-8, October 2019. DOI: https://doi.org/10.1016/j.image.2019.05.016
  7. A. Shifa, M. B. Imtiaz, M. N. Asghar, and M. Fleury, "Skin Detection and Lightweight Encryption for Privacy Protection in Real-Time Surveillance Applications," Image and Vision Computing, Vol.94, Article 103859, February 2020. DOI: https://doi.org/10.1016/j.imavis.2019.103859
  8. L. Wang, X. Yu, T. Bourlai, and D. N. Metaxas, "A Coupled Encoder-Decoder Network for Joint Face Detection and Landmark Localization," Image and Vision Computing, Vol.87, pp.37-46, July 2019. DOI: https://doi.org/10.1016/j.imavis.2018.09.008
  9. R.-L. Hsu, M. Abdel-Mottaleb, and A. K. Jain, "Face Detection in Color Images," IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol.24, No.5, pp.696-706, May 2002. DOI: https://doi.org/10.1109/34.100024
  10. L. Gong, Z. Mo, S. Zhao, and Y. Song, "An Improved Kernelized Correlation Filter Tracking Algorithm Based on Multi-Channel Memory Model," Signal Processing: Image Communication, Vol.78, pp.200-205, October 2019. DOI: https://doi.org/10.1016/j.image.2019.05.01
  11. L. You, J. Man, K. Yan, D. Wang, and H. Li, "Combined Fourier-Wavelet Transforms for Studying Dynamic Response of Anisotropic Multi-Layered Flexible Pavement with Linear-Gradual Interlayers," Applied Mathematical Modelling, Vol.81, pp.559-581, May 2020. DOI: https://doi.org/10.1016/j.apm.2020.01.03