Journal of the Institute of Electronics and Information Engineers (전자공학회논문지)

The Institute of Electronics and Information Engineers (대한전자공학회)
권호 표지
DOI QR코드

DOI QR Code

2D Spatial-Map Construction for Workers Identification and Avoidance of AGV

AGV의 작업자 식별 및 회피를 위한 2D 공간 지도 구성

  • 고정환 (인하공업전문대학 메카트로닉스과)
  • Received : 2012.05.04
  • Published : 2012.09.25
Download PDF
⟨ Previous Next ⟩

Abstract

In this paper, an 2D spatial-map construction for workers identification and avoidance of AGV using the detection scheme of the spatial coordinates based on stereo camera is proposed. In the proposed system, face area of a moving person is detected from a left image among the stereo image pairs by using the YCbCr color model and its center coordinates are computed by using the centroid method and then using these data, the stereo camera embedded on the mobile robot can be controlled for tracking the moving target in real-time. Moreover, using the disparity map obtained from the left and right images captured by the tracking-controlled stereo camera system and the perspective transformation between a 3-D scene and an image plane, depth map can be detected. From some experiments on AGV driving with 240 frames of the stereo images, it is analyzed that error ratio between the calculated and measured values of the worker's width is found to be very low value of 2.19% and 1.52% on average.

본 논문에서는 지능적인 경로 계획을 위한 스테레오 카메라 기반의 AGV의 작업자 식별 및 회피를 위한 2D 공간 지도 구성 기법을 제안하였다. 우선 스테레오 카메라로부터 입력된 영상 중 좌 영상에 YCbCr 컬러 모델 및 무게 중심법을 이용하여 이동중인 작업자의 얼굴 영역과 중심좌표를 검출하고, 검출된 좌표 값에 따라 스테레오 카메라 제어를 통해 이동하는 작업자를 실시간적으로 검출하게 된다. 다음으로, AGV 구동에 의해 추적 제어된 스테레오 카메라의 좌, 우 영상간의 시차정보와 카메라 내부 변환관계를 통해 깊이 정보를 검출한 후, 검출된 깊이 지도로부터 각 열에 존재하는 최소값을 이용한 2차원 공간좌표를 검출하여 AGV과 작업자간의 거리와 실제좌표는 물론 다른 물체들과의 상대 거리를 산출하게 되며, 산출된 위치 좌표를 토대로 AGV의 지능적인 경로 추정 및 판단에 따라 자율적인 주행을 수행하게 된다. 실시간적으로 입력되는 240 프레임의 스테레오 영상을 사용한 실험결과, 산출된 2차원 공간좌표는 검출된 작업자의 위치좌표와의 관계를 통해 작업자의 폭과 실제 측정한 값과의 오차율이 평균 1.8% 이하로 유지됨으로써 보다 지능적인 AGV 시스템의 구현 가능성을 제시하였다.

Keywords

References

  1. T. Kanade, A. Yoshida, K. Oda, H. Kano, and M. Tanaka, "A stereo machine for video-rate dense depth mapping and its new applications" Proc. of IEEE CVPR '96, pp. 196-202, 1996.
  2. T. Darrell, G. Gordon, M. Harville, J. Woodfill, "Integrated person tracking using stereo, color, and pattern detection," IEEE Conference on Computer Vision and Pattern Recognition, pp. 601-608, 1998.
  3. K. H. Bae, J. S. Koo, E. S. Kim, "A New Stereo Object Tracking System using Disparity Motion Vector", Optics Communications, vol.221, no 13, pp.23-35, 2003. https://doi.org/10.1016/S0030-4018(03)01453-6
  4. James Black, Tim Ellis, "Multi-camera image measurement and correspondence", Measurement, vol. 32, pp.61-71, 2002. https://doi.org/10.1016/S0263-2241(01)00050-1
  5. J. H. Ko, E. S. Kim, "Stereoscopic Video Surveillance System for Detection of Target's 3D Location Coordinates and Moving Trajectories", Optics Communications, Vol. 266, pp. 67-79, 2006. https://doi.org/10.1016/j.optcom.2006.04.020
  6. D. Murray and Anuo Basu "Motion tracking with an active camera", IEEE Transaction on Pattern Analysis and Machine Intelligence, vol. 16, no. 5, pp. 449-459, 1994. https://doi.org/10.1109/34.291452
  7. 고정환, "산업용 AGV 시스템의 적응적 경로설정을 위한 지능형 시각 시스템의 구현", 대한전자공학회 논문지(IE), vol. 46, no. 1, pp. 23-30, 2009.
  8. 서춘원, 노희정, 원영진, "스테레오비전 시스템을 이용한 문자 특징 추출", 대한전자공학회 논문지 (TE), 40권, 4호, 41-47쪽, 2003년.
  9. Cucchiara. R, Perini. E and Pistoni. G, "Efficient Stereo Vision for Obstacle Detection and AGV Navigation", ICIAP 2007, vol. 14, pp. 291-296, 2007.
  10. http://www.ptgrey.com/products/stereo.asp

Cited by

  1. An Camera Information Detection Method for Dynamic Scene vol.50, pp.5, 2013, https://doi.org/10.5573/ieek.2013.50.5.275