• Title/Summary/Keyword: Spatial Big Data System

검색결과 89건 처리시간 0.025초

공간 빅데이터를 활용한 지방도 포장보수 우선지역 예측 서비스 (Priority Area Prediction Service for Local Road Packaging Maintenance Using Spatial Big Data)

  • 이민영;최지우;김인영;손수진;최인호
    • 지능정보연구
    • /
    • 제29권3호
    • /
    • pp.79-101
    • /
    • 2023
  • 전라북도의 지방도 포장보수 이력 관리 현황은 현장 건설사의 포장보수 후 성과품에만 의존하여 엑셀, 한글 문서로만 관리되고 있는 실정이며, 덧씌우기 예산 등은 매년 불규칙적인 투입으로 안정적인 도로 관리 불가한 현황이다. 그에 따라 지방도의 체계적인 유지관리 방안 필요하다. 해당 논문에서는 도로 파손과 관련이 있는 데이터 및 도로 환경과 관련이 있는 데이터를 수집 및 가공하여, 도로 파손이 발생할 수 있는 위험지역을 도출하였다. 해당 예측 결과 지역을 현장검수하여 해당 방법론의 유효성을 파악하였다. 국토부에 따르면 일반국도의 도로 파임 발생 건수는 18년도에 약 4만7천건, 19년도에 약 3만8천 건이며 도로 파임 피해 소송건수는 18년도에 93건, 19년도에 119건으로 증가했다. 일반국도의 경우 도로 파임 발생 건수가 18년도에 비해 줄었으나 이는 도로 포장 보수 등을 진행하면서 발생 건수가 줄어든 것이라고 한다. 전라북도의 지방도의 포장보수 우선순위를 분석하기 위해 연구를 진행하기 위해, 엑셀, 한글 문서로만 관리되는 지방도 포트홀 상습발생지, 덧씌우기 사업구간, 긴급 보수구간위치와 같은 보수 이력데이터를 데이터화 하여, 분석하고, 보수 이력 데이터에서 벗어나 지방도의 체계적인 유지관리를 개선한다. 더 나아가, 도로와 관련된 다양한 현황데이터를 활용하여 공간 융합 데이터를 구축하고, 머신러닝 학습 데이터 및 예측에 필요한 데이터 형태로 가공하였다. 해당 공간 빅데이터를 사용하여 지방도 유지관리가 필요한 우선지역을 예측하고 도로포장 유지관리 우선순위 예측하였으며, 해당 결과를 활용하여 도로관리 예산 및 정책 수립에 활용하려 한다.

비정형 빅데이터의 실시간 복합 이벤트 탐지를 위한 기법 (The Method for Real-time Complex Event Detection of Unstructured Big data)

  • 이준희;백성하;이순조;배해영
    • Spatial Information Research
    • /
    • 제20권5호
    • /
    • pp.99-109
    • /
    • 2012
  • 최근 소셜 미디어의 발달과 스마트폰의 확산으로 SNS(Social Network Service)가 활성화가 되면서 데이터양이 폭발적으로 증가하였다. 이에 맞춰 빅데이터 개념이 새롭게 대두되었으며, 빅데이터를 활용하기 위한 많은 방안이 연구되고 있다. 여러 기업이 보유한 빅데이터의 가치창출을 극대화하기 위해 기존 데이터와의 융합이 필요하며, 물리적, 논리적 저장구조가 다른 이기종 데이터 소스를 통합하고 관리하기 위한 시스템이 필요하다. 빅데이터를 처리하기 위한 시스템인 맵리듀스는 분산처리를 활용하여 빠른게 데이터를 처리한다는 이점이 있으나 모든 키워드에 대해 시스템을 구축하여 저장 및 검색 등의 과정을 거치므로 실시간 처리에 어려움이 따른다. 또한, 이기종 데이터를 처리하는 구조가 없어 복합 이벤트를 처리하는데 추가 비용이 발생할 수 있다. 이를 해결하는 방안으로 기존에 연구된 복합 이벤트 처리 시스템을 활용하여 실시간 복합 이벤트 탐지를 위한 기법을 제안하고자 한다. 복합 이벤트 처리 시스템은 서로 다른 이기종 데이터 소스로부터 각각의 데이터들을 통합하고 이벤트들의 조합이 가능하며 스트림 데이터를 즉시 처리할 수 있어 실시간 처리에 유용하다. 그러나 SNS, 인터넷 기사 등 텍스트 기반의 비정형 데이터를 텍스트형으로 관리하고 있어 빅데이터에 대한 질의가 요청될 때마다 문자열 비교를 해야 하므로 성능저하가 발생할 여지가 있다. 따라서 복합 이벤트 처리 시스템에서 비정형 데이터를 관리하고 질의처리가 가능하도록 문자열의 논리적 스키마를 부여하고 데이터 통합 기능을 제안한다. 그리고 키워드 셋을 이용한 필터링 기능으로 문자열의 키워드를 정수형으로 변환함으로써 반복적인 비교 연산을 줄인다. 또한, 복합 이벤트 처리 시스템을 활용하면 인 메모리(In-memory)에서 실시간 스트림 데이터를 처리함으로써 디스크에 저장하고 불러들이는 시간을 줄여 성능 향상을 가져온다.

GIS를 이용한 농업용수 재이용 활용시스템 개발 (Development of GIS System for Agriculture Reuse of Wastewater Resource)

  • 김해도;이광야;정광근;이종남
    • 한국농공학회:학술대회논문집
    • /
    • 한국농공학회 2005년도 학술발표논문집
    • /
    • pp.479-484
    • /
    • 2005
  • A GIS-based integrated system for reuse of effluent from wastewater treatment plants was developed in this study. The GIS-supported program classified attribute data which the effluent's quantity and quality and agricultural thematic map data according to the 5 big river basin area. From the database, showing the spatial variation of the water quality of the effluent, thereby proposing proper mitigation strategies over the watershed. Also, this system enables the users who is going to reuse the reclaimed water for their paddies to provide of all the wastewater treatment plant data and agricultural structures and thematic map data.

  • PDF

하둡기반 공간 빅데이터 저장 관리 시스템 구조 (An Architecture for a Spatial Big-Data Management System on Hadoop)

  • 이강우;조은선
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2015년도 제51차 동계학술대회논문집 23권1호
    • /
    • pp.1-3
    • /
    • 2015
  • 본 논문에서는 하둡 환경상에서 개발 중인 공간 빅데이터 저장 관리 시스템의 구조를 설명한다. 본 시스템은 공간 센서 및 IoT의 등장으로 대용량화된 공간 데이터로 인한 기존 공간 정보 처리 시스템의 성능적 한계를 극복하기 위한 목적으로 개발 중이다. 본 시스템은 효과적인 대용량 데이터 처리를 위해 현재 활발히 연구되고 있는 빅데이터 처리 기술과 공간 정보 처리 기술을 접목하여, 대용량의 공간 정보를 수집, 저장 관리하는 기능을 제공한다. 또한 효과적인 공간 데이터의 접근을 위해 스크립트 언어 기반의 공간 정보 처리 언어를 제공하고, SQL 형식의 선언적 공간 정보 질의 처리 기능도 제공하기 위해 개발 중에 있다.

  • PDF

GPGPU를 활용한 스파크 기반 공간 연산 (Spatial Computation on Spark Using GPGPU)

  • 손찬승;김대희;박능수
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제5권8호
    • /
    • pp.181-188
    • /
    • 2016
  • 최근 급격히 증가하는 공간 데이터를 효율적으로 처리하기 위해 많은 연구들이 진행되고 있다. 기존 관계형 데이터베이스 시스템을 확장한 공간 데이터베이스 시스템은 확장성에 대한 문제가 있으며, 분산 처리 플랫폼인 하둡을 확장한 SpatialHadoop은 중간 연산 결과를 디스크에 작성하기 때문에 파일 입출력의 오버헤드로 성능이 저하되는 문제가 있다. 본 논문은 인-메모리 기반 분산 처리 프레임워크인 스파크를 확장한 공간 연산 스파크를 제안하였다. 또한 공간 연산 스파크의 성능을 향상시키기 위하여 GPGPU를 결합한 모델을 개발하였다. 공간 연산 스파크는 중간 연산 결과를 메모리에 유지시키는 스파크의 특징을 그대로 사용하고 있으며, GPGPU 기반 공간 연산 스파크의 경우 다수의 PE를 이용하여 병렬처리하기 때문에 효율적으로 공간 연산을 수행할 수 있다. 본 논문은 단일 AMD 시스템에서 공간 연산 스파크와 GPGPU 기반 공간 연산 스파크를 구현하였다. 공간 연산 스파크와 GPGPU 기반 공간 연산 스파크의 성능을 평가하기 위하여 Point-in-Polygon 연산과 Spatial Join 연산을 수행하였으며, SpatialHadoop에 비하여 최대 8배의 성능 향상을 확인하였다.

지속가능한 자원관리를 위한 섬 지역 관광자원의 공간정보와 소셜미디어 빅데이터 분석 결과를 활용한 격차분석 (A Gap Analysis Using Spatial Data and Social Media Big Data Analysis Results of Island Tourism Resources for Sustainable Resource Management)

  • 이성희;이주경;손용훈;김용진
    • 농촌계획
    • /
    • 제30권2호
    • /
    • pp.13-24
    • /
    • 2024
  • This study conducts an analysis of social media big data pertaining to island tourism resources, aiming to discern the diverse forms and categories of island tourism favored by consumers, ascertain predominant resources, and facilitate objective decision-making grounded in scientific methodologies. To achieve this objective, an examination of blog posts published on Naver from 2022 to 2023 was undertaken, utilizing keywords such as 'Island tourism', 'Island travel', and 'Island backpacking' as focal points for analysis. Text mining techniques were applied to sift through the data. Among the resources identified, the port emerged as a significant asset, serving as a pivotal conduit linking the island and mainland and holding substantial importance as a focal point and resource for tourist access to the island. Furthermore, an analysis of the disparity between existing island tourism resources and those acknowledged by tourists who actively engage with and appreciate island destinations led to the identification of 186 newly emerging resources. These nascent resources predominantly clustered within five regions: Incheon Metropolitan City, Tongyeong/Geoje City, Jeju Island, Ulleung-gun, and Shinan-gun. A scrutiny of these resources, categorized according to the tourism resource classification system, revealed a notable presence of new resources, chiefly in the domains of 'rural landscape', 'tourist resort/training facility', 'transportation facility', and 'natural resource'. Notably, many of these emerging resources were previously overlooked in official management targets or resource inventories pertaining to existing island tourism resources. Noteworthy examples include ports, beaches, and mountains, which, despite constituting a substantial proportion of the newly identified tourist resources, were not accorded prominence in spatial information datasets. This study holds significance in its ability to unearth novel tourism resources recognized by island tourism consumers through a gap analysis approach that juxtaposes the existing status of island tourism resource data with techniques utilizing social media big data. Furthermore, the methodology delineated in this research offers a valuable framework for domestic local governments to gauge local tourism demand and embark on initiatives for tourism development or regional revitalization.

Where and Why? A Novel Approach for Prioritizing Implementation Points of Public CCTVs using Urban Big Data

  • Ji Hye Park;Daehwan Kim;Keon Chul Park
    • 인터넷정보학회논문지
    • /
    • 제24권5호
    • /
    • pp.97-106
    • /
    • 2023
  • Citizens' demand for public CCTVs continues to rise, along with an increase in variouscrimes and social problems in cities. In line with the needs of citizens, the Seoul Metropolitan Government began installing CCTV cameras in 2010, and the number of new installations has increased by over 10% each year. As the large surveillance system represents a substantial budget item for the city, decision-making on location selection should be guided by reasonable standards. The purpose of this study is to improve the existing related models(such as public CCTV priority location analysis manuals) to establish the methodology foranalyzing priority regions ofSeoul-type public CCTVs and propose new mid- to long-term installation goals. Additionally, using the improved methodology, we determine the CCTV priority status of 25 autonomous districts across Seoul and calculate the goals. Through its results, this study suggests improvements to existing models by addressing their limitations, such as the sustainability of input data, the conversion of existing general-purpose models to urban models, and the expansion of basic local government-level models to metropolitan government levels. The results can also be applied to other metropolitan areas and are used by the Seoul Metropolitan Government in its CCTV operation policy

공간정보와 통합 스마트카드 자료를 활용한 도시철도 역사 보행 기종점 분석 기법 개발 (A Comprehensive Framework for Estimating Pedestrian OD Matrix Using Spatial Information and Integrated Smart Card Data)

  • 정은비;유소영;이준;김경태
    • 대한교통학회지
    • /
    • 제35권5호
    • /
    • pp.409-422
    • /
    • 2017
  • TOD (Transit-Oriented Development)는 대중교통 중심의 복합기능을 가진 집약적인 도시구조이며, 미래지향형 지속가능한 도시를 유지하기 위해 제시되는 개념이다. 최근 도시철도 역사를 중심으로 복합 환승센터 개발이 활발히 추진되고 있으며, 사업의 규모와 복잡성으로 인해 보다 과학적이고 객관적인 분석을 통한 계획과 유지관리 등이 요구되고 있다. 이에 따라, 본 연구에서는 공간정보와 통합 스마트카드 자료를 활용하여 도시철도 역사 보행 기종점 추정을 위한, 표준화된 분석 절차를 개발하고자 하였으며, 삼성역 사례 분석을 통해 제시된 분석 절차 및 방법에 대한 검증을 수행하였다. 본 연구에서 제시된 분석 절차는 자료 수집 기술과 빅데이터 DB 분석 기법 발전에 따라 유기적 확장 가능한 분석 환경을 마련하였다는 데 큰 의의를 가진다.

공간 빅데이터와 범죄통계자료를 이용한 범죄취약지 추출 (Extraction of Crime Vulnerable Areas Using Crime Statistics and Spatial Big Data)

  • 박소랑;박재국
    • 융합정보논문지
    • /
    • 제8권1호
    • /
    • pp.161-171
    • /
    • 2018
  • 범죄는 특정한 장소나 주변 환경에 따라서 범죄의 유형과 빈도가 매우 밀접한 관계를 갖으며 발생된다. 특히 공간적으로 범죄는 도심지역, 유흥가, 노상 등에서 많이 발생된다. 이러한 이유로 범죄와 발생장소와의 관계를 분석하는 것은 범죄를 예측하는데 효과적이며 이를 위해서 다양한 공간분석 기법이 적용되고 있다. 이에 본 논문에서는 범죄 예측에 활용코자 GIS 공간분석 기법을 이용하여 범죄취약지를 추출하였다. 범죄취약지는 범죄통계자료를 이용하여 장소와 용도지역별로 다르게 발생되는 범죄를 GIS의 핫스팟 분석(Hot Spot Analysis)과 역거리 가중법(IDW)을 이용하여 추출하였다. 또한 셉테드(CPTED)의 감시요소인 CCTV, 가로등, 지구대, 파출소에 대해서 각각 감시범위와 가중치를 산정하고 범죄취약지도와 중첩하여 4개 등급(안전, 주의, 경고, 위험)으로 표현된 셉테드 기반의 범죄취약지도를 제작하였다.

3차원 공간데이터 처리를 위한 차로 및 시설물 운영 관리 시스템 아키텍처 설계 연구 (A Study on the Architecture Design of Road and Facility Operation Management System for 3D Spatial Data Processing)

  • 김덕호;김성진;이정욱
    • 한국지리정보학회지
    • /
    • 제24권4호
    • /
    • pp.136-147
    • /
    • 2021
  • 현재 자율주행 관련 기술은 주행의 정도를 적용하여 단계별로 발전하고 있다. 자율주행 차량이 움직이는 도로에 대한 운영 관리 기술도 자율주행 기술에 발맞춰 발전해야 하는 것은 필수적이다. 그러나 현재 도로 운영 관리의 경우 2차원 정보만을 사용하여 관리되고 있어 차로 및 시설물 정보관리, 유지 보수의 체계화된 운영 관리에 한계를 보이고 있다. 본 연구는 현재 2차원 공간데이터를 기반으로 관리하고 있는 차로 및 시설물 운영 관리 시스템을 정밀도로 지도 데이터와 실시간 빅 데이터 처리가 가능한 융합 형태의 데이터베이스를 설계하여 3차원 공간정보 기반의 운영 관리가 가능한 운영 관리 시스템 아키텍처 구성 방안을 제시하였다. 본 연구를 통해 향후 정밀도로 지도를 기반으로 한 운영 관리 시스템을 구축하여 차로 및 시설물 유지관리에 사용할 경우 시설물을 시각화하여 관리할 수 있으며, 다중 사용자의 데이터 편집 및 분석이 가능하고, 다양한 GIS S/W와 연동이 가능하며, 보안 및 백업·복구 등의 기능이 강화되어 대용량의 실시간 데이터를 효율적으로 처리할 수 있을 것으로 판단된다.