DOI QR코드

DOI QR Code

Personal Information Detection and Blurring Cloud Services Based on Machine Learning

머신러닝에 기반을 둔 사진 속 개인정보 검출 및 블러링 클라우드 서비스

  • Kim, Min-jeong (Dept of Information Security, Seoul Women University) ;
  • Lee, Soo-young (Dept of Information Security, Seoul Women University) ;
  • Lee, Jiyoung (Dept of Information Security, Seoul Women University) ;
  • Ham, Na-youn (Dept of Information Security, Seoul Women University)
  • 김민정 (서울여자대학교 정보보호학과) ;
  • 이수영 (서울여자대학교 정보보호학과) ;
  • 이지영 (서울여자대학교 정보보호학과) ;
  • 함나연 (서울여자대학교 정보보호학과)
  • Published : 2019.05.10

Abstract

클라우드가 대중화되어 많은 모바일 유저들이 자동 백업 기능을 사용하면서 민감한 개인정보가 포함된 사진들이 무분별하게 클라우드에 업로드 되고 있다. 개인정보를 포함한 클라우드가 악의적으로 해킹 될 시, 사진에 포함된 지문, 자동차 번호판, 카드 번호 등이 유출됨에 따라 대량의 개인정보가 유출될 가능성이 크다. 이에 따라 적절한 기준에 맞게 사진 속 개인 정보 유출을 막을 수 있는 기술의 필요성이 대두되고 있다. 현재의 클라우드 시스템의 문제를 해결하고자 본 연구는 모바일 기기에서 클라우드 서버로 사진을 백업하는 과정에서 영역 검출과 블러링의 과정을 제안하고 있다. 클라우드 업로드 과정에서 사진 속의 개인 정보를 검출한 뒤 이를 블러링하여 클라우드에 저장함으로써 악의적인 접근이 행해지더라도 개인정보의 유출을 방지할 수 있다. 머신러닝과 computer vision library등을 이용하여 이미지 내에 민감한 정보를 포함하고 있는 영역을 학습된 모델을 통해 검출한 뒤, OpenCV를 이용하여 블러링처리를 진행한다 사진 속에 포함될 수 있는 생체정보인 지문은 손 영역을 검출한 뒤, 해당 영역을 블러링을 하여 업로드하고 카드번호나 자동차 번호판이 포함된 사진은 영역을 블러링한 뒤, 암호화하여 업로드 된다. 후에 필요에 따라 본인인증을 거친 후 일정기간 열람을 허용하지만 사용되지 않을 경우 삭제되도록 한다. 개인정보 유출로 인한 피해가 꾸준히 증가하고 있는 지금, 사진 속의 개인 정보를 보호하는 기술은 안전한 통신과 더불어 클라우드의 사용을 더 편리하게 할 수 있을 것으로 기대된다.

Keywords