• 제목/요약/키워드: Big data traffic

검색결과 234건 처리시간 0.024초

Big Data Based Dynamic Flow Aggregation over 5G Network Slicing

  • Sun, Guolin;Mareri, Bruce;Liu, Guisong;Fang, Xiufen;Jiang, Wei
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제11권10호
    • /
    • pp.4717-4737
    • /
    • 2017
  • Today, smart grids, smart homes, smart water networks, and intelligent transportation, are infrastructure systems that connect our world more than we ever thought possible and are associated with a single concept, the Internet of Things (IoT). The number of devices connected to the IoT and hence the number of traffic flow increases continuously, as well as the emergence of new applications. Although cutting-edge hardware technology can be employed to achieve a fast implementation to handle this huge data streams, there will always be a limit on size of traffic supported by a given architecture. However, recent cloud-based big data technologies fortunately offer an ideal environment to handle this issue. Moreover, the ever-increasing high volume of traffic created on demand presents great challenges for flow management. As a solution, flow aggregation decreases the number of flows needed to be processed by the network. The previous works in the literature prove that most of aggregation strategies designed for smart grids aim at optimizing system operation performance. They consider a common identifier to aggregate traffic on each device, having its independent static aggregation policy. In this paper, we propose a dynamic approach to aggregate flows based on traffic characteristics and device preferences. Our algorithm runs on a big data platform to provide an end-to-end network visibility of flows, which performs high-speed and high-volume computations to identify the clusters of similar flows and aggregate massive number of mice flows into a few meta-flows. Compared with existing solutions, our approach dynamically aggregates large number of such small flows into fewer flows, based on traffic characteristics and access node preferences. Using this approach, we alleviate the problem of processing a large amount of micro flows, and also significantly improve the accuracy of meeting the access node QoS demands. We conducted experiments, using a dataset of up to 100,000 flows, and studied the performance of our algorithm analytically. The experimental results are presented to show the promising effectiveness and scalability of our proposed approach.

통행거리빈도분포를 활용한 고속도로 기능 평가 개선 연구 (A study on improving the evaluation of motorway functions using Trip Length Frequency Distribution(TLFD))

  • 권철우;윤병조
    • 도시과학
    • /
    • 제11권2호
    • /
    • pp.9-17
    • /
    • 2022
  • The purpose of this study is to develop an index for evaluating the function of a new motorway using the travel distance frequency distribution (TLFD) calculated using the vehicle travel route big data, and to overcome the limitations of the evaluation through the existing traffic volume. The mobility evaluation index of motorways was developed by applying it to the TLFD data table in 2019. The smaller the value of the mobility evaluation index of the link is calculated, the more it is a link with mainly short-distance travel, and the higher the value of the mobility evaluation index, the more it means a link with mainly long-distance travel. The accessibility evaluation index was calculated through the result of the mobility evaluation index of all motorways developed, and all motorways were grouped into three groups using K-means clustering. Group A was found to exist inside a large city and consisted of motorways with many short-distance traffic, Group B was investigated as acting as an arterial between groups, and Group C was classified as a motorway consisting mainly of long-distance traffic connecting large cities and large cities. This study is significant in developing a new motorway function evaluation index that can overcome the limitations of motorway function evaluation through the existing traffic volume. It is expected that this study can be a reasonable comprehensive indicator in the operation and planning process of motorways.

대구광역시 교통약자 보행자 교통사고 공간 군집 분석 (Spatial clustering of pedestrian traffic accidents in Daegu)

  • 황영은;박성희;최화빈;윤상후
    • 디지털융복합연구
    • /
    • 제20권3호
    • /
    • pp.75-83
    • /
    • 2022
  • OECD 국가 중 보행자 사망 비율이 가장 높은 대한민국은 보행자 중심으로 법령이 제정하면서 안전한 보행환경 개선을 위해 노력하고 있다. 이 연구는 노인 인구와 학원이 밀도가 높은 대구광역시를 대상으로 보행자 교통사고 클러스터를 포아송분포를 이용한 스캔통계량으로 파악하고자 한다. 어린이와 노인에 관한 교통사고의 대중 인식을 수집하여 워드클라우드로 살펴본 결과 어린이는 정부와 기업인의 캠페인을 중심으로 노출되고 있고, 노인은 사고감소를 위한 정책연구를 중심으로 노출되고 있었다. 어린이 보행자 교통사고의 상대적 위험성은 공단이 많은 평리·내당·용산동에서 높았고, 학원 밀집도가 높은 만촌·봉무·범어동에서 낮았다. 노인 보행자 교통사고의 상대적 위험성은 도심에 가까운 용산·죽전·두류·내당동에서 높았고, 범어·삼덕·팔공·봉무동에서 낮았다. 대구광역시 내당동과 용산동은 어린이와 노인 보행사고 위험성이 높아 보행 안전 취약지역으로 파악되었다. 이는 스캔통계량이 교통사고 위험 지역 탐색에 효과적임을 의미한다.

DTG 빅데이터 기반의 링크 평균통행시간을 이용한 도심네트워크 혼잡분석 방안 연구 (A Study of Measuring Traffic Congestion for Urban Network using Average Link Travel Time based on DTG Big Data)

  • 한여희;김영찬
    • 한국ITS학회 논문지
    • /
    • 제16권5호
    • /
    • pp.72-84
    • /
    • 2017
  • 4차 산업혁명의 빅데이터 시대와 더불어 교통정보 수집원도 기존 지점검지 체계에서 구간검지체계로 바뀌었다. 위성측위시스템 기반의 DTG(Digital Tachograph) 자료를 대상으로, 원시자료와 가공단계에 따른 자료의 속성을 고찰하였다. 가공단계에 따라 생성되는 개별차량의 주행궤적, 개별차량의 링크통행시간, 링크 평균통행시간 정보의 특성을 분석하였다. 가공자료의 특징에 따라 교통관리분야에서 활용할 수 있는 방안을 고찰하고, 센터의 자료 관리현황과 현 시점에서 활용 가능한 이력자료를 선정하였다. 광범위성을 가지고 상시 수집 가능한 링크 평균통행시간의 이력자료를 이용하여 통행시간지표를 생성하는 방법을 제시하였다. 통행시간지표를 이용하여 도심 네트워크의 혼잡을 모니터링하는 방법에 대해 고찰하고, 단독 교차로의 운영 방법이 바뀔 경우 이에 대한 사전 사후 분석을 사례로 분석하였다. 동시에 DTG 자료의 온전한 활용이 어려운 현재의 상황을 한계점으로 제시하였다.

해상-빅데이터 기반 선박 항적 표시 및 해상교통량 통계 분석 시스템의 개발 (A Development of Analysis System for Vessel Traffic Display and Statistics based on Maritime-BigData)

  • 황훈규;김배성;신일식;송상기;남경태
    • 한국정보통신학회논문지
    • /
    • 제20권6호
    • /
    • pp.1195-1202
    • /
    • 2016
  • 최근 다양한 분야에 빅데이터 기술을 활용하기 위한 방법에 관한 연구가 활발하게 이루어지고 있다. 해상-빅데이터는 인터넷 공간에 있는 정보들이 아닌 선박의 항해통신장비로부터 발생 및 수집되는 수많은 정보로 정의할 수 있다. 한편, 해상 교통량의 증가함에 따라 해양 사고도 증가하고 있으며, 이에 따라 해양 안전에 관한 요구가 증대되고 있다. 이러한 요구를 충족시키기 위한 일환으로, 본 논문에서는 해상에 있는 수많은 선박으로부터 수신되는 대량의 AIS 메시지 데이터를 기반으로 선박의 항적 표시 및 해상교통량 통계 분석을 전자해도를 통해 시각적으로 표현하는 시스템을 개발한다. 또한, 유용성 검증을 위해 개발한 시스템을 활용하여 선박 항적 표시 기능 및 해상교통량 통계 분석 기능을 수행하였다. 이를 통해 개발한 시스템의 선박 항적 표시 기능 및 해상교통량 통계 분석 기능을 통해 선박의 항적 표시, 비정상적인 운항 패턴, AIS 장비의 이상 유무, 해상교통량 통계 분석 등에 활용 가능함을 확인하였다.

그리드 인덱스 기법을 이용한 교통 빅데이터 맵핑 방안 연구 (A Study on Traffic Big Data Mapping Using the Grid Index Method)

  • 정규수;성홍기
    • 한국ITS학회 논문지
    • /
    • 제19권6호
    • /
    • pp.107-117
    • /
    • 2020
  • 최근 자율주행의 발달로 차량에 장착된 다양한 센서가 일반화 되고 그 센서에서 발생되는 빅 데이터는 교통 분야에서 활용도가 높아지고 있다. 본 연구에서는 이러한 교통 빅 데이터의 활용을 위해 실시간으로 발생되는 차량 센싱 빅 데이터와 도로 기상 등 공공데이터를 지도상에 효율적으로 맵핑하기 위한 그리드 인덱스 기법을 제안하였으며, 제안한 그리드 공간 분할 방식과 그리드 ID 부여 방식에 대하여 적용 가능성 및 효과를 분석하였다. 차량 센서에서 실시간 분석된 강수 데이터를 전국 화물차의 디지털 운행기록장치(DTG, Digital Tachograph) 데이터를 기반으로 가상 생성하여 좌표기반으로 맵핑하였으며, 제안 방식과 링크 단위 처리방식의 처리 속도를 비교하였다. 제안 방식은 링크 단위의 처리 방식 대비 약 2,400배 이상의 데이터 처리 성능 개선을 나타냈다. 추가로 그리드 맵핑의 적용 가능성 및 링크 단위 맵핑과의 차별성을 확인하고자 가상 생성한 데이터를 시각화하고 비교하였다.

빅데이터 분석을 활용한 민식이법 제정과정에 대한 연구 (A Big Data Analysis on the Enactment Process of Min-Sik's Law)

  • 강애라;남태우
    • 정보화정책
    • /
    • 제30권4호
    • /
    • pp.89-112
    • /
    • 2023
  • 교통안전정책은 교통안전법을 기반으로 5년마다 수립되어 진행되고 있다. 장기적으로 계획이 수립되어 진행되는 정책 외에도 사회적으로 이슈가 되는 각종 사건, 사고의 재발을 방지하기 위해 수립되는 정책들도 있다. 시민의 행정참여는 최근 들어 관심이 매우 집중되고 있으며, 행정의 민주성을 실현할 수 있는 효율적인 수단이 되고 있다. 본 연구에서는 최근 어린이보호구역에 대한 법령강화라는 사회적 이슈를 몰고 온 '김민식 사건'이 '국민청원'이라는 '온라인 플랫폼'의 등장으로 인해 어떻게 행정의 민주성이 구현되고 있으며, 법제정에 기여하게 되었는지 빅데이터 분석을 기반으로 제시하고자 한다. 이슈의 주기에 따른 정책변동을 시계열적인 구분에 따라 나누고 각 구간에 어떠한 내용으로 구성되고 있는지 텍스트마이닝 분석을 통해 살펴보고자 한다. 본 연구의 결과는 정책문제 해결에 있어 실질적이고 현실적인 대안의 마련이 중요하다는 정책적 함의를 제시함으로써 연구자 및 정책입안자에게 유용한 이론적, 실무적 시사점을 제공할 것으로 기대한다.

시공간적 영향력을 반영한 딥러닝 기반의 통행속도 예측 모형 개발 (Development of Traffic Speed Prediction Model Reflecting Spatio-temporal Impact based on Deep Neural Network)

  • 김영찬;김준원;한여희;김종준;황제웅
    • 한국ITS학회 논문지
    • /
    • 제19권1호
    • /
    • pp.1-16
    • /
    • 2020
  • 4차 산업혁명 시대가 도래함에 따라 빅데이터를 활용하는 딥러닝에 대한 관심이 높아졌으며 다양한 분야에서 딥러닝을 이용한 연구가 활발하게 진행되고 있다. 교통 분야에서도 교통빅데이터를 많이 활용하는 만큼 딥러닝을 연구에 이용한다면 많은 이점이 있을 것이다. 본 연구에서는 통행속도를 예측하기 위하여 딥러닝 기법인 LSTM을 이용한 단기 통행속도 예측 모형을 구축하였다. 예측에 활용한 데이터인 통행속도 데이터가 시계열 데이터인 것을 고려하여 시계열 예측에 적합한 LSTM 모델을 선택하였다. 통행속도를 보다 정확하게 예측하기 위하여 시간적, 공간적 영향을 모두 반영하는 모형을 구축하였으며, 모형은 1시간 이후를 예측하는 단기 예측모형이다. 분석데이터는 서울시 교통정보센터에서 수집한 5분 단위 통행속도를 활용하였고 분석구간은 교통이 혼잡한 강남대로 일부구간으로 선정하여 연구를 수행하였다.

교통 빅데이터의 효율적 저장 및 검색 기술의 설계와 구현 (Design and Implementation of Efficient Storage and Retrieval Technology of Traffic Big Data)

  • 김기수;이재진;김홍회;장유림;함유근
    • 한국빅데이터학회지
    • /
    • 제4권2호
    • /
    • pp.207-220
    • /
    • 2019
  • 최근 정보통신기술의 발달은 센서를 바탕으로 수많은 데이터를 구축하고 이를 이용하여 실시간 서비스를 제공할 수 있게 한다. 교통안전공단에서는 디지털 운행기록계를 통해 전국의 상용차의 운행 정보를 수집하고 있다. 전국 상용자의 운행 정보는 교통 분야에서 다방면으로 활용이 가능하다. 그 중 특히 자율주행 분야에서는 실시간으로 운행정보를 분석하여 위험 운전에 대응을 하거나 방지하는데 도움을 줄 수 있다. 그러나 전통적인 데이터베이스 시스템을 이용하여 대용량의 데이터를 실시간 서비스에 적합한 수준의 성능으로 처리하는 데는 한계가 존재한다. 특히 국내에서는 이와 같은 기술적인 문제로 상용차 운행정보의 실시간 분석을 위한 대규모 교통 빅데이터의 처리가 이전에 시도된 적이 없다. 이런 문제를 해결하기 위해 본 연구에서는 새로운 방식의 데이터베이스 서버 시스템 최적화를 진행하였고 실시간 서비스가 가능한 수준임을 확인하였다. 구축된 데이터베이스 시스템을 이용하여 디지털 트윈, 자율주행환경을 마련하기 위한 기반 데이터를 확보할 수 있을 것으로 기대된다.

  • PDF

화물차량의 방문시설 공간설정 방법론 연구 (A Study on the Visiting Areas Classification of Cargo Vehicles Using Dynamic Clustering Method)

  • 조범철;조은아
    • 한국ITS학회 논문지
    • /
    • 제22권6호
    • /
    • pp.141-156
    • /
    • 2023
  • 화물의 흐름은 물류시설 투자 및 물류관련 정책 수립에 필요한 핵심적인 기초자료이다. 국가승인통계인 화물자동차의 기종점 통행량은 분석의 공간적 해상도가 시군구 단위로 집계되고 있다. 이는 물류시설 방문 및 이용에 관한 상세한 정보로 활용하는데 한계가 있다. 본 연구에서는 화물차의 이동 정보를 분석함에 있어 공간적 해상도를 시설단위로 식별 추출할 수 있는 방법론을 트립체인 정보를 활용하여 개발하고자 하였다. 먼저, DTG를 활용하여 개별 화물차량의 방문지 위치정보를 식별하고, 화물차의 통행 순서정보를 이용하여 화물차량의 방문한 공간적 범위를 H3 기반의 폴리곤으로 생성하였다. 생성된 트립체인 폴리곤 간의 연계성을 전국 단위로 분석함으로 폴리곤의 H3 해상도를 결정하였으며, 최적의 해상도를 동적으로 도출하기 위한 파라미터의 결정 알고리즘을 개발하였다. 전국을 대상으로 실증하여 폴리곤을 생성하고 최적 해상도 결정 결과 공간 적합도는 81.26% 수준으로 확보되고 오차율은 14.8% 수준으로 검증되었다. 본 연구에서 개발한 방법론으로 화물차량의 통행체인 특성과 방문 시설의 특성에 따라 군집화함으로 물류 거점을 기준으로 화물의 특성을 파악할 수 있는 기반을 마련하였다.