대용량 화물 DTG 데이터 분석을 위한 빅데이터 플랫폼 설계 및 구현

Design and Implementation of Big Data Platform for Analyzing Huge Cargo DTG Data

  • 김범수 (한국건설기술연구원 미래융합연구본부) ;
  • 김태학 (한국건설기술연구원 미래융합연구본부) ;
  • 김진욱 (한국건설기술연구원 미래융합연구본부)
  • Kim, Bum-Soo (Dept. of Future Technology and Convergence Research, Korea Institute of Civil Engineering and Building Technology) ;
  • Kim, Tae-Hak (Dept. of Future Technology and Convergence Research, Korea Institute of Civil Engineering and Building Technology) ;
  • Kim, Jin-Wook (Dept. of Future Technology and Convergence Research, Korea Institute of Civil Engineering and Building Technology)
  • 발행 : 2019.07.10

초록

본 논문에서는 대용량 화물 DTG 데이터 분석을 위한 빅데이터 플랫폼을 설계 및 구현한다. DTG(digital tacho graph)는 차량운행기록을 실시간으로 저장하는 장치로서, 차량의 GPS, 속도, RPM, 제동유무, 이동거리 등 차량운행 관련 데이터가 1초 단위로 기록된다. 차량 운행 패턴 및 분석을 하기 위해서는 DTG 데이터의 빠른 처리가 필수적이며, 특히 대용량 DTG 데이터를 가공 및 변환하기 위해서는 별도의 플랫폼이 필요하다. 본 논문에서는 오픈소스 기반의 빅데이터 프레임워크인 스파크(Spark)를 이용하여 대용량 화물 DTG 데이터의 전처리 플랫폼을 구현하였다. 실제 대용량 화물 DTG 데이터를 대상으로 데이터를 변환 및 지도상에 표현해 보인다.

키워드