DOI QR코드

DOI QR Code

A LiDAR-based Visual Sensor System for Automatic Mooring of a Ship

선박 자동계류를 위한 LiDAR기반 시각센서 시스템 개발

  • Kim, Jin-Man (Ship Repair Supporting Center, Mokpo National Maritime University) ;
  • Nam, Taek-Kun (Division of Marine Engineering System, Mokpo National Maritime University) ;
  • Kim, Heon-Hui (Division of Marine Engineering System, Mokpo National Maritime University)
  • 김진만 (목포해양대학교 선박수리지원센터) ;
  • 남택근 (목포해양대학교 기관시스템공학부) ;
  • 김헌희 (목포해양대학교 기관시스템공학부)
  • Received : 2022.10.04
  • Accepted : 2022.10.28
  • Published : 2022.10.31

Abstract

This paper discusses about the development of a visual sensor that can be installed in an automatic mooring device to detect the berthing condition of a vessel. Despite controlling the ship's speed and confirming its location to prevent accidents while berthing a vessel, ship collision occurs at the pier every year, causing great economic and environmental damage. Therefore, it is important to develop a visual system that can quickly obtain the information on the speed and location of the vessel to ensure safety of the berthing vessel. In this study, a visual sensor was developed to observe a ship through an image while berthing, and to properly check the ship's status according to the surrounding environment. To obtain the adequacy of the visual sensor to be developed, the sensor characteristics were analyzed in terms of information provided from the existing sensors, that is, detection range, real-timeness, accuracy, and precision. Based on these analysis data, we developed a 3D visual module that can acquire information on objects in real time by conducting conceptual designs of LiDAR (Light Detection And Ranging) type 3D visual system, driving mechanism, and position and force controller for motion tilting system. Finally, performance evaluation of the control system and scan speed test were executed, and the effectiveness of the developed system was confirmed through experiments.

본 논문은 자동계류 장치에 설치하여 선박의 접안 상황을 검출할 수 있는 시각 센서의 개발에 대하여 논하고 있다. 선박의 접안 시 사고방지를 위해 선박의 속도를 통제하고 위치를 확인하고 있음에도 불구하고 부두에서의 선박 충돌사고는 매년 발생하고 있으며, 이로 인한 경제적, 환경적 피해가 매우 크다. 따라서 부두에 접안하는 선박에 대한 안전성 확보를 위해 선박의 위치 및 속도 정보를 신속하게 확보할 수 있는 시각 시스템의 개발은 중요하다. 이에 본 연구에서는 선박의 접안 시 사람과 유사하게 영상을 통해 접안하는 선박을 관찰하고, 주변 환경에 따른 선박의 접안 상태를 적절하게 확인할 수 있는 시각센서를 개발하였다. 먼저, 개발하고자 하는 시각 센서의 적정성을 확보하기 위해 기존 센서로부터 제공되는 정보, 감지 범위, 실시간성, 정확도 및 정밀도 측면에서 센서 특성을 분석하였다. 이러한 분석 자료를 바탕으로 LiDAR형태의 3D시각 시스템의 개념 설계, 구동메커니즘 설계 및 모션 구동부의 힘과 위치 제어기 설계 등을 수행하여 대상물의 정보를 실시간으로 획득할 수 있는 3D 시각 모듈을 개발하였다. 최종적으로 시스템 구동을 위한 제어 시스템의 성능평가와 스캔 속도에 대한 성능을 분석하였고, 실험을 통해 개발된 시스템의 유용성을 확인할 수 있었다.

Keywords

Acknowledgement

이 논문은 2022년 해양수산부 재원으로 해양수산과학기술진흥원의 지원을 받아 수행된 연구임(스마트항만-자율운항선박 연계기술 개발).

References

  1. Beckett, T(2010), Berthing Velocities and Brolsma's Curves. Beckett Rankine Marine Consulting Engineers. Retrieved from https://superfloats.com/
  2. Cho, I. S., J. W. Cho, and S. W. Lee(2018), A Basic Study on the Measured Data Analysis of Berthing Velocity of Ships, Journal of Coastal Disaster Prevention, Vol. 5, No. 2, pp. 61-71. https://doi.org/10.20481/kscdp.2018.5.2.61
  3. Choe, H. -Y.(2017), LiDAR Sensor Technology and Industry Trends, Electric world, Vol. 66, No. 9, pp. 12-17.
  4. Jun, S. Y., Y. M. Kim, B. G. Woo, and H. Chung(2008), A Systematic Approach to Decide Maximum Berthing Ship Size Coupled with Berth Design Criteria, Journal of the Korean Society of Marine Environment & Safety, Vol. 14, No. 1, pp. 45-54.
  5. Koubaa, Anis(2017), Robot Operating System (ROS): The Complete Reference, Springer.
  6. Lee, S. W., J. W. Cho, and I. S. Cho(2019), Estimation of Berthing Velocity Using Probability Distribution Characteristics in Tanker Terminal, Journal of Navigation and Port Research, Vol. 43, No. 3, pp. 186-196. https://doi.org/10.5394/KINPR.2019.43.3.186
  7. Premebida, C., O. Ludwig, and U. Nunes(2009), LiDAR and vision-based pedestrian detection system, Journal of Field Robotics, Vol. 26, No. 9, pp. 696-711. https://doi.org/10.1002/rob.20312
  8. Quigley, Morgan, Ken Conley, Brian Gerkey, Josh Faust, Tully Foote, Jeremy Leibs, and AY Ng(2009), ROS: an open-source Robot Operating System, ICRA Workshop on Open Source Software, Vol. 3, pp. 5-10.
  9. Spinello, L. and Siegwart, R.(2008), Human detection using multimodal and multidimensional features. 2008 IEEE International Conference on Robotics and Automation, pp. 3264-3269.