DOI QR코드

DOI QR Code

A License Plate Recognition System Robust to Vehicle Location and Viewing Angle

영상 내 차량의 위치 및 촬영 각도에 강인한 차량 번호판 인식 시스템

  • 홍성은 (한국과학기술원 전산학과) ;
  • 황성수 (한국과학기술원 전기및전자공학과) ;
  • 김성대 (한국과학기술원 전기및전자공학과)
  • Received : 2012.09.21
  • Published : 2012.12.25

Abstract

Recently, various attempts have been made to apply Intelligent Transportation System under various environments and conditions. Consequently, an accurate license plate recognition regardless of vehicle location and viewing angle is required. In this paper, we propose a novel license plate recognition system which exploits a) the format of license plates to remove false candidates of license plates and to extract characters in license plates and b) the characteristics of Hangul for accurate character recognition. In order to eliminate false candidates of license plates, the proposed method first aligns the candidates of license plates horizontally, and compares the position and the shape of objects in each candidate with the prior information of license plates provided by Korean Ministry of Construction & Transportation. The prior information such as aspect ratio, background color, projection image is also used to extract characters in license plates accurately applying an improved local binarization considering luminance variation of license plates. In case of recognizing Hangul in license plates, they are initially grouped according to their shape similarity. Then a super-class method, a hierarchical analysis based on key feature points is applied to recognize Hangul accurately. The proposed method was verified with high recognition rate regardless of background image, which eventually proves that the proposed LPR system has high performance regardless of the vehicle location or viewing angle.

최근 지능형 교통 시스템을 다양한 상황 및 환경에 적용하려는 시도가 증가함에 따라, 다수의 지능형 교통 시스템에서 사용되고 있는 차량 번호판 인식 과정이 입력영상 내 차량의 위치 및 촬영 각도와 관계없이 정확하게 이루어질 필요성이 있다. 본 논문에서는 현행 번호판의 규격정보를 활용하여 오검출된 번호판 후보 영역의 제거 및 번호판 내 글자추출을 수행하고, 한글 특성을 고려한 글자인식을 수행하는 차량 번호판 인식 시스템을 제안한다. 제안하는 시스템은 입력영상에서 검출한 번호판 후보 영역들에 대해서 기울기 보정을 수행한 후, 후보 영역 내 글자로 판명되는 객체의 위치 및 형태 정보를 번호판 규격정보와 비교 검증하는 과정을 거쳐 오검출된 번호판 영역을 제거한다. 또한 글자추출 단계에서는 영역 내 밝기 변화를 고려한 이진화를 수행한 뒤, 번호판 규격정보 및 번호판 영역의 종횡비, 배경색, 투영정보 등을 종합적으로 활용하여 번호판 영역 내 글자를 정확하게 추출한다. 그리고 번호판 영역 내 글자들 중 오인식률이 높은 한글의 인식에 있어서, 형태적 유사성으로 그룹을 나눈 뒤, 주요 특징점들을 토대로 계층을 좁혀 나가는 super-class 개념을 적용하여 한글 인식을 수행한다. 성능 검증을 위해 다양한 배경에서 촬영된 영상에 대해서 실험을 수행한 결과 제안하는 번호판 인식 시스템이 영상 내 차량의 위치 및 촬영 각도의 변화에 강인한 것을 확인할 수 있었다.

Keywords

References

  1. 국토해양부 국가교통정보센터 - ITS소개
  2. 김진호, 노덕수, "에지기반 세그먼트 영상 생성에 의한 차량 번호판 인식 시스템", 한국콘텐츠학회논문지, 제12권, 제3호, 9-16쪽, 2012년 3월
  3. 서정민, 호효휘, 남상온, 이상문, "휴대폰을 이용한 차량 번호판 실시간 인식시스템의 구현", 한국멀티 미디어학회 추계학술발표논문집, 26-20쪽, 2008년 11월
  4. B. Hongliang, and L. Changping, "A hybrid license plate extraction method based on edge statistics and morphology", ICPR, Vol. 2, pp. 831-834, Aug 2004.
  5. Sunghoon kim, "A Robust License-Plate Extraction Method under Complex Image Conditions", ICPR, Vol. 3, pp. 216-219, 2002.
  6. 양선옥, 전영민, 정지환, 류상환, "디지털 신호 분 석 기법을 이용한 다양한 번호판 추출 방법", 대한전자공학회 전자공학회논문지, 제45권 3호, 8-17쪽, 2008년 3월
  7. Christos-Nikolaos E, "License Plate Recognition From Still Images and Video Sequences: A Survey", IEEE TRANSACTIONS ON ITS, Vol. 9, No. 3, SEPTEMBER 2008.
  8. Deb, K., "HSI color based vehicle license plate detection", Control, Automation and Systems, ICCAS, pp. 687-691, Oct 2008.
  9. 이병모, 차의영, "HSI 컬러 정보와 레이블링을 통 한 차량 번호판 추출", 한국정보과학회 추계학술발표회, 제28권 2호, 2001.
  10. Mei Yu, "An approach to Korean license plate recognition based on vertical edge matching", Systems, Man, and Cybernetics, IEEE International Conference, 2000.
  11. Danian Zheng, "An efficient method of license plate location", Pattern Recognition Letters, Vol 26, Issue 15, pp. 2431-2438, 2005. https://doi.org/10.1016/j.patrec.2005.04.014
  12. S. Wang and H. Lee, "Detection and recognition of license plate characters with different appearances", in Proc. Conf. Intell. Transp. Syst, vol. 2, pp. 979-984, 2003.
  13. T. D. Duan, "Building an automatic vehicle license-plate recognition system", in Proc. Com-put.Sci, pp. 59-63, 2005.
  14. V. Kamat, "An efficient implementation of the Hough transform for detecting vehicle license plates using DSP", in Proc. Real-Time Technol. Appl. Symp, pp. 58-59, May 1995.
  15. 오형철, "에지 투영 및 방향성 벡터를 이용한 차량 번호판 인식 알고리즘", 한국정보기술학회논문지, 제7권 제1호, Feb 2009.
  16. T. Naito, "Robust license-plate recognition method for passing vehicles under outside environment," IEEE Trans. Veh. Technol, Vol. 49, No. 6, pp. 2309-2319, Nov 2000. https://doi.org/10.1109/25.901900
  17. http://www.dilab.co.kr/
  18. 이평원, "차량의 종류와 자동차 번호판 인식을 위한 영상처리 알고리즘 개발", 서울시립대학교 대학원 제어계측 공학과 공학석사 학위논문, 2000.
  19. 이형석, 김동률, 배유석, "패턴인식을 이용한 차량 번호 인식 프로그램", 한국인터넷정보학회 정기총회 및 추계학술발표대회, 제6권, 제2호, 807-810쪽, 2005년 11월
  20. LIU Ji-Lin,SONG Jia-Tao,DING Li-Ya, "Vehicle License Plate Recognition System with High Performance", Acta Automatica Sinica, Vol 29, No. 3, 2002.
  21. Mohamed Deriche, "GCC License Plates Detection and Recognition Using Morphological Filtering and Neural Networks", International Journal of Computer Science and Information Security, Vol 8, Issue 8, 2010.
  22. Rafael C. Gonzalez, "Digital Image Processing", Prentice Hall, 2003.
  23. Richard Hartley, "Multiple View Geometry in Computer Vision", CambridgeUniversityPress, 2003.
  24. N. 0tsu, "Threshold Selection Method From Gray Level Histogram", IEEE Transactions on Systems. Man. and Cybernetics. SMC-9, 1979m pp 62-66
  25. 건설교통부 고시 제2006-431호
  26. Duda R, Hart P, Stork D, "Pattern classification and scene analysis", Wiley, 2001.