• Title/Summary/Keyword: Big-Data Platform

Search Result 503, Processing Time 0.053 seconds

도로 침수영역의 탐색을 위한 빅데이터 분석 시스템 연구 (A Study on the Big Data Analysis System for Searching of the Flooded Road Areas)

  • 송영미;김창수
    • 한국멀티미디어학회논문지
    • /
    • 제18권8호
    • /
    • pp.925-934
    • /
    • 2015
  • The frequency of natural disasters because of global warming is gradually increasing, risks of flooding due to typhoon and torrential rain have also increased. Among these causes, the roads are flooded by suddenly torrential rain, and then vehicle and personal injury are happening. In this respect, because of the possibility that immersion of a road may occur in a second, it is necessary to study the rapid data collection and quick response system. Our research proposes a big data analysis system based on the collected information and a variety of system information collection methods for searching flooded road areas by torrential rains. The data related flooded roads are utilized the SNS data, meteorological data and the road link data, etc. And the big data analysis system is implemented the distributed processing system based on the Hadoop platform.

차세대 스마트도시 시설물의 플랫폼 정의와 디지털 체인 (Next Generation Smart-City Facility Platform and Digital Chain)

  • 양승원;김진웅;김성아
    • 한국BIM학회 논문집
    • /
    • 제10권4호
    • /
    • pp.11-21
    • /
    • 2020
  • With increasing interest and research on smart cities, there is also an increasing number of studies on urban facilities that can be built within smart cities. According to these studies, smart cities' urban facilities are likely to become high value-added industries. However, the concept of smart city is not clear because it involves various fields. Therefore, in this study, the definition of Next-Generation(N.G) Smart City Facilities with Digital Twin and Digital Chain is carried out through a multidisciplinary approach. Based on this, Next-Generation Smart City Facilities will be divided into High Value-Added Products and Big Data Platforms. Subsequently, the definition of the Digital Chain containing the data flow of the entire process built through the construction of the Digital Twin proceeds. The definitions derived are applied to the Next-Generation Noise Barrier Tunnel to ensure that data is exchanged at the Digital Twin stage, and to review the proposed configuration of the Digital Chain and Data Flow in this study. The platform definition and Digital Chain of Next-Generation Smart City Facilities proposed in this study suggest that it can affect not only the aspects of data management that are currently in the spotlight, but also the manufacturing industry as a whole.

빅데이터 분석을 위한 비용효과적 오픈 소스 시스템 설계 (Designing Cost Effective Open Source System for Bigdata Analysis)

  • 이종화;이현규
    • 지식경영연구
    • /
    • 제19권1호
    • /
    • pp.119-132
    • /
    • 2018
  • Many advanced products and services are emerging in the market thanks to data-based technologies such as Internet (IoT), Big Data, and AI. The construction of a system for data processing under the IoT network environment is not simple in configuration, and has a lot of restrictions due to a high cost for constructing a high performance server environment. Therefore, in this paper, we will design a development environment for large data analysis computing platform using open source with low cost and practicality. Therefore, this study intends to implement a big data processing system using Raspberry Pi, an ultra-small PC environment, and open source API. This big data processing system includes building a portable server system, building a web server for web mining, developing Python IDE classes for crawling, and developing R Libraries for NLP and visualization. Through this research, we will develop a web environment that can control real-time data collection and analysis of web media in a mobile environment and present it as a curriculum for non-IT specialists.

Framing city image: A content analysis of Chinese city image construction on Korean press

  • YANG Ting;LIU Jing
    • International Journal of Advanced Culture Technology
    • /
    • 제12권1호
    • /
    • pp.158-168
    • /
    • 2024
  • With Wenhai big data SaaS cloud platform.2.0, this study analyzed data of 135 news reports relating to Chinese city Chongqing from Yonhap News Agency and ten South Korean mainstream newspapers from May 1st, 2018 to September 30th, 2022. Under the framework of Frame Theory, this research conducted data mining and analysis on how Korean mainstream media shaped city image of Chongqing, what kind of city images were shaped from dimensions of politics, economy, society, culture & sports as well as tourism and whether they are consistent with those in Chinese media. At the last part, discussions and suggestions was made.

빅데이터 로그를 이용한 실시간 예측분석시스템 설계 및 구현 (Real time predictive analytic system design and implementation using Bigdata-log)

  • 이상준;이동훈
    • 정보보호학회논문지
    • /
    • 제25권6호
    • /
    • pp.1399-1410
    • /
    • 2015
  • 기업들은 다가오는 데이터 경쟁시대를 이해하고 이에 대비해야 한다며 가트너는 기업의 생존 패러다임에 많은 변화를 요구하고 있다. 또한 통계 알고리즘 기반의 예측분석을 통한 비즈니스 성공 사례들이 발표되면서, 과거 데이터 분석에 따른 사후 조치에서 예측 분석에 의한 선제적 대응으로의 전환은 앞서가고 있는 기업의 필수품이 되어 가고 있다. 이러한 경향은 보안 분석 및 로그 분석 분야에도 영향을 미치고 있으며, 실제로 빅데이터화되고 있는 대용량 로그에 대한 분석과 지능화, 장기화되고 있는 보안 분석에 빅데이터 분석 프레임워크를 활용하는 사례들이 속속 발표되고 있다. 그러나 빅데이터 로그 분석 시스템에 요구되는 모든 기능 및 기술들을 하둡 기반의 빅데이터 플랫폼에서 수용할 수 없는 문제점들이 있어서 독자적인 플랫폼 기반의 빅데이터 로그 분석 제품들이 여전히 시장에 공급되고 있다. 본 논문에서는 이러한 독자적인 빅데이터 로그 분석 시스템을 위한 실시간 및 비실시간 예측 분석 엔진을 탑재하여 사이버 공격에 선제적으로 대응할 수 있는 프레임워크를 제안하고자 한다.

빅데이터 기반의 도시정보·접대중교통근성 분석 플랫폼 구축 방안에 관한 연구 -광주광역시를 중심으로- (A study on the Construction of a Big Data-based Urban Information and Public Transportation Accessibility Analysis Platforms- Focused on Gwangju Metropolitan City -)

  • 이상근;유승민;이준;김대일
    • 스마트미디어저널
    • /
    • 제11권11호
    • /
    • pp.49-62
    • /
    • 2022
  • 최근 전 세계적으로 빅데이터, AI, IoT, 자율주행, 디지털트윈 등 스마트시티 솔루션이 발달하면서 다양한 스마트기기와 SNS가 확산하고 사람들이 도처에 남긴 행적이 기록되면서 규모를 가늠할 수 없을 정도로 많은 정보와 데이터가 생산되는 '빅데이터' 환경을 활용한 스마트시티 구축이 활발하게 진행 중이다. 본 연구의 목적은 4차 산업혁명에 따른 지속가능한 스마트시티의 도시정보·대중교통 접근성에 있어 시민의 교통 편의성 향상 및 효율적인 정책수립을 위해 빅데이터 기반의 객관적이고 체계적인 분석 모델을 개발하고, 지속가능한 도시의 공공·민간 DB를 활용한 빅데이터 기반 대중교통 접근성 및 정책관리 플랫폼 구축의 방법론을 도출하는데 있다. 이를 위해 광주광역시를 대상으로 상세생활권을 구분하고 기초 생활편의시설 접근성 및 빅데이터 기반 대중교통 시스템을 분석하였다. 그 결과, 1) 대중교통 네트워크 평가를 위한 빅데이터 활용, 2) 빅데이터 기반의 교통 수단/서비스 의사결정지원, 3) 도심 교통 네트워크 모니터링 서비스 제공, 4) 주차수요 발생원 분석 및 개선방안 제공과 같은 빅데이터 기반 도시정보·대중교통 접근성 플랫폼 구축을 제안하였다.

Big Data Analysis and Prediction of Traffic in Los Angeles

  • Dauletbak, Dalyapraz;Woo, Jongwook
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제14권2호
    • /
    • pp.841-854
    • /
    • 2020
  • The paper explains the method to process, analyze and predict traffic patterns in Los Angeles county using Big Data and Machine Learning. The dataset is used from a popular navigating platform in the USA, which tracks information on the road using connected users' devices and also collects reports shared by the users through the app. The dataset mainly consists of information about traffic jams and traffic incidents reported by users, such as road closure, hazards, accidents. The major contribution of this paper is to give a clear view of how the large-scale road traffic data can be stored and processed using the Big Data system - Hadoop and its ecosystem (Hive). In addition, analysis is explained with the help of visuals using Business Intelligence and prediction with classification machine learning model on the sampled traffic data is presented using Azure ML. The process of modeling, as well as results, are interpreted using metrics: accuracy, precision and recall.

중소기업 대안금융으로서 플랫폼 금융의 모색 (Seeking Platform Finance as an Alternative Model of Financing for Small and Medium Enterprises in Korea)

  • 정재만;박재성
    • 기업가정신과 벤처연구
    • /
    • 제20권3호
    • /
    • pp.49-68
    • /
    • 2017
  • 플랫폼 금융은 데이터 분석과 플랫폼을 이용한 매칭이라는 새로운 자금조달 방식을 제시함으로써 중소기업의 대안금융으로 부상하고 있다. 이 사업의 본질은 빅데이터를 이용한 위험평가와 투자자의 위험-수익 선호(risk-return preference)를 적절히 반영할 수 있는 위험분산 기술을 금융업에 적용한 것이다. 이로써 소상공인을 위한 소액금융, 중소기업의 운전자본(working capital) 조달을 위한 공급망 금융의 형태로 기존 금융의 대안으로 부상하고 있다. 한국의 플랫폼 금융은 이 같은 가능성에도 아직 유치 단계(infant stage)이며, 정책적 지원을 필요로 한다. 이는 다음과 같이 요약할 수 있다. "기관 및 공공 투자참여", 플랫폼 금융의 민간 자금유입(crowd-in)을 위한 정책금융의 씨앗자금(seed money) 공급, "수용적 규제체계", 영국의 샌드박스와 같이 새로운 사업에 대한 한시적 규제 유예, "데이터 개방 확대", 재량적인 데이터 공유의 허용, "대안투자 수단의 보급", 저금리시대의 대안투자 수단으로서 플랫폼 금융 육성.

  • PDF

과학빅데이터 고속전송을 위한 ScienceDMZ 구축 방안 연구 (A Study on ScienceDMZ Construction for High Speed Transfer of Science Big Data)

  • 문정훈;곽재승;홍원택;김기현;이상권;김동균;김용환;유기성
    • KNOM Review
    • /
    • 제22권2호
    • /
    • pp.12-21
    • /
    • 2019
  • 과학빅데이터 실험 장비와 ICT 기술의 비약적인 발전으로 엑사바이트 이상 규모의 데이터가 생성되고 있으나, 이러한 빅데이터를 전송하는 기술은 응용과학연구자의 요구에 맞는 수준에 이르지 못하고 있다. 과학빅데이터에 대한 고성능 데이터 전송을 위하여 QoS(Quality of Service) 기반의 다양한 기술이 개발되고 있지만, 기반이 되는 인프라 네트워크의 전반적인 변경을 요구하기도 한다. 반면 ScienceDMZ 기술은 전송 성능에 큰 지장을 초래하는 방화벽을 우회함으로써, 과학빅데이터 전송 성능 향상을 도모하며, 또한 기존 네트워크의 큰 변화 없이 구현이 가능하다. 본 논문에서는, KREONET(국가과학기술연구망) 기반의 국제간 장거리 환경에서 과학빅데이터 고속 전송을 통하여 ScienceDMZ를 구축하고 성능을 검증하였다. 또한, ScienceDMZ의 확장으로써, GPU 플랫폼을 분산 환경에서 연계하는 방안을 소개하고자 한다.

빅데이터 기반 군수품 품질정보 활용방안에 대한 연구 (A Study on the Application Method of Munition's Quality Information based on Big Data)

  • 전수연;이동헌;배만재
    • 한국산학기술학회논문지
    • /
    • 제17권6호
    • /
    • pp.315-325
    • /
    • 2016
  • 국방산업에 관련된 데이터의 양적팽창과 기술성장에 따라, 유의미한 품질정보를 추출하고 이를 통해 정책 제정 및 품질보증 업무에 활용하는 것이 요구되고 있다. 데이터에 기반한 경향 파악 및 의사결정 도출은 다수의 상황에 유연하게 대처할 수 있도록 하여 업무의 생산성을 높이고 새로운 기회를 발견하는 핵심 수단으로 활용될 수 있다. 따라서 국방산업에서는 개발단계부터 양산단계까지 다양한 품질정보들을 수집하고 이를 활용할 수 있도록 빅데이터 기반의 업무체계 구축이 필요하며, 축적된 정보를 활용하기 위한 방안이 필요하다. 본 연구는 정보체계 운용을 통해 신뢰성이 확보된 군수품의 품질정보를 수집하여 정형화된 빅데이터를 구축하는 방안을 제시하였으며, 사용자가 이를 활용할 수 있는 종합표준플랫폼을 제시하였다. 제안된 종합표준플랫폼은 군수품시험성적서 정보시스템(Test Report Information Service for Military Supplies, TRIS 시스템) 구축을 통하여 수행하였으며, TRIS 시스템을 통해 축적되는 정형 데이터의 활용방안을 제안하였다. 더불어 국방산업 비정형 데이터 활용방안에 대해 연구하였다. 본 연구의 결과는 향후 국방산업의 데이터 인프라 형성에 기여할 것으로 기대되며, 종합표준플랫폼을 통해 수집된 정보들은 군수품 품질보증에 관한 무기체계 별 전략 수립 및 동향 파악에 유용하게 활용될 것이다.