• 제목/요약/키워드: Real-time driving

검색결과 685건 처리시간 0.029초

샴 네트워크를 사용하여 추적 레이블을 사용하지 않는 다중 객체 검출 및 추적기 학습에 관한 연구 (Training of a Siamese Network to Build a Tracker without Using Tracking Labels)

  • 강정규;송유승;민경욱;최정단
    • 한국ITS학회 논문지
    • /
    • 제21권5호
    • /
    • pp.274-286
    • /
    • 2022
  • 이동객체 추적은 컴퓨터 비전 분야에서 오랜 시간 동안 연구가 진행되어 온 분야로 자율주행이나 운전 보조 시스템 등의 시스템에서 아주 중요한 역할을 수행하고 있다. 이동객체 추적 기술은 일반적으로 객체를 검출하는 검출기와 검출된 객체를 추적하는 추적기의 결합으로 이루어져 있다. 검출기는 다양한 데이터셋이 공개되어 사용되고 있기 때문에 쉽게 좋은 모델을 학습할 수 있지만, 추적기의 경우 상대적으로 공개된 데이터셋도 적고 직접 데이터셋을 구성하는 것도 검출기 데이터셋에 비해 굉장히 오랜 시간을 소요한다. 이에 검출기를 따로 개발하고, 별도의 추적기를 학습 기반이 아닌 방식을 활용하여 개발하는 경우가 많은데 이런 경우 두 개의 시스템이 차례로 작동하게 되어 전체 시스템의 속도를 느리게 하고 앞단의 검출기의 성능이 변할 때마다 별도로 추적기 또한 조정해줘야 한다는 단점이 있다. 이에 본 연구는 검출용 데이터셋만을 사용하여 검출과 추적을 동시에 수행하는 모델을 구성하는 방법을 제안한다. 데이터 증강 기술과 샴 네트워크를 사용하여 단일 이미지에서 객체를 검출 및 추적하는 방법을 연구하였다. 공개 데이터셋에 실험을 진행하여 학습 결과 높은 속도로 작동하는 이동객체 검출 및 추적기를 학습할 수 있음을 검증하였다.

Active Min-Depth Filter를 이용한 비분할 장애물 최근접 점 검출 (Detection of Nearest Points without Obstacle Segmentation using Active Min-Depth Filter)

  • 박경균;정문호
    • 한국전자통신학회논문지
    • /
    • 제18권1호
    • /
    • pp.77-84
    • /
    • 2023
  • 자율 주행 로봇에서 장애물 회피 기능은 핵심적인 것이다. 포텐셜 필드는 이 분야에 가장 많이 사용되어온 방법이다. 이것은 장애물의 최근접 점을 실시간으로 계산해야 하는데 이를 위해 거리 센서 데이터 프로파일로 부터 안정적으로 장애물 영역을 분할해야 하는 어려움이 있다. 본 논문에서는 분할 없이 각 장애물의 최근접 점을 실시간으로 구할 수 있는 Active Min-Depth Filter를 제안한다. 다양한 센서 노이즈 환경에 대한 시뮬레이션을 통해 Active Min-Depth Filter의 강인성을 확인할 수 있었고 실제 이동 로봇 적용하여 성공적인 결과를 얻었다.

실시간 장애물 회피 자동 조작을 위한 차량 동역학 기반의 강화학습 전략 (Reinforcement Learning Strategy for Automatic Control of Real-time Obstacle Avoidance based on Vehicle Dynamics)

  • 강동훈;봉재환;박주영;박신석
    • 로봇학회논문지
    • /
    • 제12권3호
    • /
    • pp.297-305
    • /
    • 2017
  • As the development of autonomous vehicles becomes realistic, many automobile manufacturers and components producers aim to develop 'completely autonomous driving'. ADAS (Advanced Driver Assistance Systems) which has been applied in automobile recently, supports the driver in controlling lane maintenance, speed and direction in a single lane based on limited road environment. Although technologies of obstacles avoidance on the obstacle environment have been developed, they concentrates on simple obstacle avoidances, not considering the control of the actual vehicle in the real situation which makes drivers feel unsafe from the sudden change of the wheel and the speed of the vehicle. In order to develop the 'completely autonomous driving' automobile which perceives the surrounding environment by itself and operates, ability of the vehicle should be enhanced in a way human driver does. In this sense, this paper intends to establish a strategy with which autonomous vehicles behave human-friendly based on vehicle dynamics through the reinforcement learning that is based on Q-learning, a type of machine learning. The obstacle avoidance reinforcement learning proceeded in 5 simulations. The reward rule has been set in the experiment so that the car can learn by itself with recurring events, allowing the experiment to have the similar environment to the one when humans drive. Driving Simulator has been used to verify results of the reinforcement learning. The ultimate goal of this study is to enable autonomous vehicles avoid obstacles in a human-friendly way when obstacles appear in their sight, using controlling methods that have previously been learned in various conditions through the reinforcement learning.

Design and Implementation of a Big Data Analytics Framework based on Cargo DTG Data for Crackdown on Overloaded Trucks

  • Kim, Bum-Soo
    • 한국컴퓨터정보학회논문지
    • /
    • 제24권12호
    • /
    • pp.67-74
    • /
    • 2019
  • 본 논문에서는 과적 화물차량 단속을 위한 대용량 화물 DTG 데이터 분석 플랫폼을 설계 및 구현한다. DTG(digital tachograph)는 차량운행기록을 실시간으로 저장하는 장치로서, 차량의 GPS, 속도, RPM, 제동유무, 이동거리 등 차량운행 관련 데이터가 1초 단위로 기록된다. 차량 운행 패턴 및 분석을 하기 위해서는 DTG 데이터의 빠른 처리가 필수적이며, 특히 대용량 DTG 데이터를 가공 및 변환하기 위해서는 빅데이터 분석 플랫폼이 필요하다. 본 논문에서는 오픈소스 기반의 빅데이터 프레임워크인 스파크(Spark)를 이용하여 과적차량 단속을 위한 대용량 화물 DTG 데이터의 분석 플랫폼을 구현하였다. 구현 결과, 실제 대용량 화물 DTG 데이터를 GIS 데이터로 변환하여 지도상에 표현하고 단속 추천 지점을 보여준다.

Intelligent Hybrid Fusion Algorithm with Vision Patterns for Generation of Precise Digital Road Maps in Self-driving Vehicles

  • Jung, Juho;Park, Manbok;Cho, Kuk;Mun, Cheol;Ahn, Junho
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제14권10호
    • /
    • pp.3955-3971
    • /
    • 2020
  • Due to the significant increase in the use of autonomous car technology, it is essential to integrate this technology with high-precision digital map data containing more precise and accurate roadway information, as compared to existing conventional map resources, to ensure the safety of self-driving operations. While existing map technologies may assist vehicles in identifying their locations via Global Positioning System, it is however difficult to update the environmental changes of roadways in these maps. Roadway vision algorithms can be useful for building autonomous vehicles that can avoid accidents and detect real-time location changes. We incorporate a hybrid architectural design that combines unsupervised classification of vision data with supervised joint fusion classification to achieve a better noise-resistant algorithm. We identify, via a deep learning approach, an intelligent hybrid fusion algorithm for fusing multimodal vision feature data for roadway classifications and characterize its improvement in accuracy over unsupervised identifications using image processing and supervised vision classifiers. We analyzed over 93,000 vision frame data collected from a test vehicle in real roadways. The performance indicators of the proposed hybrid fusion algorithm are successfully evaluated for the generation of roadway digital maps for autonomous vehicles, with a recall of 0.94, precision of 0.96, and accuracy of 0.92.

듀얼카메라를 활용한 ACC 안전성 평가 방법에 관한 연구 (A Study on the ACC Safety Evaluation Method Using Dual Cameras)

  • 김봉주;이선봉
    • 자동차안전학회지
    • /
    • 제14권2호
    • /
    • pp.57-69
    • /
    • 2022
  • Recently, as interest in self-driving cars has increased worldwide, research and development on the Advanced Driver Assist System is actively underway. Among them, the purpose of Adaptive Cruise Control (ACC) is to minimize the driver's driving fatigue through the control of the vehicle's longitudinal speed and relative distance. In this study, for the research of the ACC test in the real environment, the real-road test was conducted based on domestic-road test scenario proposed in preceding study, considering ISO 15622 test method. In this case, the distance measurement method using the dual camera was verified by comparing and analyzing the result of using the dual camera and the result of using the measurement equipment. As a result of the comparison, two results could be derived. First, the relative distance after stabilizing the ACC was compared. As a result of the comparison, it was found that the minimum error rate was 0.251% in the first test of scenario 8 and the maximum error rate was 4.202% in the third test of scenario 9. Second, the result of the same time was compared. As a result of the comparison, it was found that the minimum error rate was 0.000% in the second test of scenario 10 and the maximum error rate was 9.945% in the second test of scenario 1. However, the average error rate for all scenarios was within 3%. It was determined that the representative cause of the maximum error occurred in the dual camera installed in the test vehicle. There were problems such as shaking caused by road surface vibration and air resistance during driving, changes in ambient brightness, and the process of focusing the video. Accordingly, it was determined that the result of calculating the distance to the preceding vehicle in the image where the problem occurred was incorrect. In the development stage of ADAS such as ACC, it is judged that only dual cameras can reduce the cost burden according to the above derivation of test results.

교통상황 및 인적요소를 고려한 도로전광표지 판독소요시간 추정 (An Estimation for VMS Message Reading Time Considering Traffic Condition and Human Factor)

  • 현문국;김승지;김병종;김원규
    • 한국ITS학회 논문지
    • /
    • 제11권1호
    • /
    • pp.13-27
    • /
    • 2012
  • ITS 기술의 발달에 따라 평균적으로 고속도로 8km마다 도로전광표지가 설치되어 운영중이다. 하지만 도로의 교통상황을 적절히 반영하지 못한 채, 기 설정된 정보를 일방적으로 표출하고 있는 실정이다. 이로 인해 한정된 시간 동안 운전자는 표출되는 정보를 모두 인지하지 못하거나, 자신이 원하는 정보가 표출되기 전에 도로전광표지를 지나감으로써 도로전광표지의 기능을 떨어뜨리고 신뢰성 저하를 가져오고 있다. 본 연구에서는 교통류속도 등의 교통상황 및 인적요소를 고려한 도로전광표지 판독소요시간 및 거리 측정을 위한 실험을 수행하였다. 실제 주행환경을 모사할 수 있는 Winroad 패키지를 이용하여 실험환경을 구현하였으며 113명의 피실험자군을 대상으로 실험을 수행하였다. 실험결과에 대하여 회귀분석을 수행하였으며, 도로전광표지 메시지 판독소요시간 측정 모형을 도출하였다. 본 연구에서 도출된 도로전광표지 판독소요시간 측정 모형을 이용하여 교통류 속도와 표출 메시지 정보량 등 교통상황과 인적요소를 반영한 메시지셋을 개발하는데 활용 될 수 있도록 한다.

멀티 혼합 중요도 시스템에서 태스크 마이그레이션의 스케줄가능성 분석 (Schedulability Analysis for Task Migration under Multiple Mixed-Criticality Systems)

  • 백전성;강경태
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2019년도 제60차 하계학술대회논문집 27권2호
    • /
    • pp.7-8
    • /
    • 2019
  • In this paper, we applied the migration technique to real-time tasks that have relatively low criticality but still important to be dropped by the mixed-criticality scheduling algorithms. The proposed drop and migrate algorithm analyzes the schedulability by calculating CPU utilization and response time of using task migration. We provide analysis to guarantee the deadline of LO-tasks, by transforming the response time equation specified with migration time. The transformed response time equation was able to analyze the migration schedulability. This algorithm can be used with various mixed-criticality schedulers as a supplementary method. We expect this algorithm will be used for scheduling LO-tasks such as communication task that requires safety guarantee especially in platooning and autonomous driving by utilizing the advantages of multiple node connectivities.

  • PDF

동영상 분석을 통한 실시간 포장 손상 탐지 및 알림 서비스 (Real-Time Pavement Damage Detection Based on Video Analysis and Notification Service)

  • 박주영;이희순;강경태;김병회
    • 정보과학회 컴퓨팅의 실제 논문지
    • /
    • 제24권2호
    • /
    • pp.59-66
    • /
    • 2018
  • 본 논문에서는 주행 중 가속도 센서와 카메라로부터 데이터를 실시간으로 수집, 분석하여 자동으로 도로 포장의 다양한 손상을 탐지하는 시스템을 제안한다. 제안하는 시스템은 도로의 포장 손상을 탐지하는 즉시 해당 이미지와 가속도 신호, GPS좌표를 도로관리자에게 전송하며 이를 서버에도 전송하여 데이터베이스에 이력화한다. 이를 통해, 도로 포장 손상 탐지 시스템은 도로관리자로 하여금 1) 신속, 정확, 편리하게 도로의 상태를 관리할 수 있게 하며, 2) 다양한 종류의 도로 포장 손상을 조기에 발견하여 관리할 수 있도록 하며, 3) 도로의 포장 손상을 추적 관리할 수 있도록 한다. 결과적으로, 제안하는 시스템은 10번의 고속도로 주행 실증 평가에서 평균 100 km/h로 주행 중 74%의 민감도와 84%의 정밀도로 도로 포장의 손상을 탐지하여 그 유효성이 입증되었다.

CPU-FPGA 구조를 이용한 실시간 FCWS 구현 (Real-time FCWS implementation using CPU-FPGA architecture)

  • 한성우;정용진
    • 전기전자학회논문지
    • /
    • 제21권4호
    • /
    • pp.358-367
    • /
    • 2017
  • 최근 운전자의 편의와 안전을 위해 전방 차량 추돌 감지 시스템(Front Collision Warning System : FCWS)과 같은 다양한 운전자 보조 시스템(Advanced Driver Assistance System : ADAS)이 개발되고 있다. FCWS는 주행 중 실시간으로 동작해야 하기 때문에 높은 처리속도를 필요로 한다. 또한 자동차의 전장화에 따라 FCWS를 차량용 임베디드 시스템에서 동작시키기 위해 저전력 시스템이 필요하다. 본 논문에서는 FCWS를 CPU-FPGA 구조에서 실시간 처리가 가능하도록 구현하였다. 차선 검출은 Inverse Transform Perspective(IPM)와 슬라이딩 윈도우 방식을 이용하여 CPU에서도 빠른 속도로 동작할 수 있도록 하였다. 차량검출은 높은 인식률을 가지는 Convolutional Neural Network(CNN)을 이용하였고, FPGA에서 병렬처리로 가속하였다. 제안하는 구조는 저전력으로 동작하는 ARM-Core A9과 FPGA를 내장한 Intel FPGA Cyclone V SoC(System on Chip)에서 검증하였다. HD해상도에서 FCWS는 44FPS로 실시간으로 동작하며, 고성능 PC 환경보다 처리속도 대비 에너지 효율이 약 3.33배 높은 것을 확인했다.