DOI QR코드

DOI QR Code

Convenience Store Product Recognition Application for the Blind

시각장애인을 위한 편의점 제품 인식 애플리케이션

  • Han, Sang Hyeok (Department of Computer Engineering, Korea Polytechnic University) ;
  • Park, Da Soo (Department of Computer Engineering, Korea Polytechnic University) ;
  • Lim, Chae Min (Department of Computer Engineering, Korea Polytechnic University) ;
  • Jeong, Ji Woon (Department of Computer Engineering, Korea Polytechnic University)
  • 한상혁 (한국산업기술대학교 컴퓨터공학부) ;
  • 박다수 (한국산업기술대학교 컴퓨터공학부) ;
  • 임채민 (한국산업기술대학교 컴퓨터공학부) ;
  • 정지운 (한국산업기술대학교 컴퓨터공학부)
  • Published : 2021.11.04

Abstract

본 논문은 딥러닝 학습을 통한 객체(편의점제품) 인식 시스템을 소개한다. 편의점 내에서 시각장애인의 접근성인 매우 떨어지고 있다. 그나마 점자가 있는 제품은 음료수 제품이지만 제품 이름이 아닌 범주로 표현하고 있어 원하는 제품 구매를 어렵게 한다. 본 논문에서는 YOLOv5를 통한 딥러닝 학습을 사용하여 정확한 제품을 시각장애인에게 제공할 수 있는 애플리케이션을 개발했다. 사용한 학습데이터 세트는 제품을 직접 찍어 확보했으며, 국내 11개 제품을 포함한다. 학습데이터 세트는 총 23,814장을 사용했으며, 결과 정확도를 나타내는 mAP_0.5:0.95 는 약 0.9790의 성능을 보였다.

Keywords

Acknowledgement

본 논문은 과학기술정보통신부 정보통신창의 인재양성사업의 지원을 통해 수행한 ICT멘토링 프로젝트 결과물입니다