A Vehicle License Plate Recognition Using the Haar-like Feature and CLNF Algorithm

Haar-like Feature 및 CLNF 알고리즘을 이용한 차량 번호판 인식

  • 박승현 (홍익대학교 대학원 전기정보제어공학과) ;
  • 조성원 (홍익대학교 전자전기공학부)
  • Received : 2015.02.20
  • Accepted : 2016.03.18
  • Published : 2016.03.31

Abstract

This paper proposes an effective algorithm of Korean license plate recognition. By applying Haar-like feature and Canny edge detection on a captured vehicle image, it is possible to find a connected rectangular, which is a strong candidate for license plate. The color information of license plate separates plates into white and green. Then, OTSU binary image processing and foreground neighbor pixel propagation algorithm CLNF will be applied to each license plates to reduce noise except numbers and letters. Finally, through labeling, numbers and letters will be extracted from the license plate. Letter and number regions, separated from the plate, pass through mesh method and thinning process for extracting feature vectors by X-Y projection method. The extracted feature vectors are classified using neural networks trained by backpropagation algorithm to execute final recognition process. The experiment results show that the proposed license plate recognition algorithm works effectively.

본 논문은 한국의 차량 번호판 인식에 효과적인 방법을 제안한다. 획득한 자동차 이미지로부터 Haar-Like Feature를 이용해 대략적인 번호판 후보 영역을 찾아낸 후, 랭크 필터를 사용하여 전처리를 하고 캐니 에지 추출 (Canny Edge Detecting) 알고리즘을 이용하여 연결된 사각형을 찾아 번호판을 추출한다. 추출된 번호판의 색상 정보를 이용하여 흰색/녹색 번호판을 구분하고, 각 번호판을 OTSU 이진화와 주변 전경 픽셀 전파 알고리즘인 CLNF (CCLUF with NFPP)을 통해 문자를 제외한 잡음을 제거하고 레이블링하여 숫자 및 문자 영역을 분리한다. 분리된 문자 영역은 메쉬 방법 및 세선화 후 X-Y 투영 방법으로 특징 벡터를 추출한다. 추출된 특징 벡터는 역전파 알고리즘을 사용하여 학습된 신경망을 이용하여 문자 인식을 수행한다. 제안된 차량 번호판 인식 알고리즘의 효과적 동작은 실험을 통해 확인하였다.

Keywords

References

  1. 문형돈, 이윤철, 이동일, "국내외 지능형교통시스템 (ITS) 시장 동향", 전자통신동향분석, 제17권 제6호, 2002년 12월.
  2. SOUTH KOREA Various Vehicle Classes, Available: http://worldlicenseplates.com.
  3. 장언동, 송영준, 김영길, "칼라 정보와 선형 회귀 방정식을 이용한 차량 번호판 추출", 한국콘텐츠학회/한국통신학회, 2003 추계 종합학술대회 논문집, 제1권 제2호, pp.218-22, 2003년 11월.
  4. 박영식, "웨이브렛 변환을 이용한 차량번호판 추출", 韓國情報技術學會論文誌, 제6권 제2호, 2007년 11월.
  5. 오형철, 최종호, "에지 투영 및 방향성 벡터를 이용한 차량번호판 인식 알고리즘", 韓國情報技術學會論文誌 2009년 제7권 제1호, 2009년 2월.
  6. Yuanxing Zhao, Jing Gu, Chui Liu, Shumin Han, Yong Gao, Qingmao Hu, "License Plate Location Based on Haar-Like Cascade Classifiers and Edges", 2010 Second WRI Global Congress on Intelligent Systems, pp.102-105, 2010.
  7. M. Sarker, Sook Yoon and Dong Sun Park, "A Fast and Robust License Plate Detection Algorithm Based on Two-Stage Cascade AdaBoost", KSII Transactions on Internet and Information Systems, Vol. 8, No. 10, Oct. 2014.
  8. ONDREJ MARTINSKY, "Algorithmic and mathematical principles of automatic number plate recognition systems", Brno University Of Technology, pp.6-7, 2007.
  9. Noah Kuntz, "Canny Tutorial", Available: http://www.pages.drexel.edu/-nk752/Research/cannyTut2.html, nk752@drexel.edu, 2006.
  10. T. B. Nguyen and S-T. Chung, "An Improved Real-time Blob Detection for Visual Surveilance," 2nd International Congress on Image and Signal Processing, Tianjin, 2009.
  11. 김명숙, 공용해, "번호판 문자 인식에 효과적인 특징 추출에 관한 연구", 한국정보 기술학회 논문지, 제5권 제2호, pp.128-136, 200년 6월..
  12. 오동수, 이은철, 유재근, 남문현, "신경회로망을 이용한 필기체 한글 자모음 및 숫자인식에 관한 연구", 대한전기학회 하계학술대회 논문집, 1991년 7월.
  13. 홍성진, "공간 컨텍스트 아다부스트를 이용한 효과적인 얼굴표식 위치추정 방법, 인하대학교 학위논문, 2015.
  14. M. Krishna and A. Srinivasulu, "Face Detection System On AdaBoost Algorithm Using Haar Classifiers", International Journal of Modern Engineering Research, Vol. 2, Issue 5, 2012
  15. N. Otsu, "A threshold selection method form gray level histogram", IEEE SMC-9, No. 1, pp. 62-66, 1979.
  16. P. Karthigayani, S. Sridhar, "Deceision Tree Based Occlusion Detection in Face Recognition and Estimation of Human Age Using Back Propagation Neural Network", Journal of Computer Science, Vol. 10, No. 1, pp. 115-127, 2014. https://doi.org/10.3844/jcssp.2014.115.127
  17. S. Kosbatwar and S. Pathan, "Pattern Association for Character Recognition by Back-Propagation Algorithm Using Neural Network Approach", International Journal of Computer Science & Engineering Survey, Vol. 3, No. 1, 2012.