• 제목/요약/키워드: Data Stream Process

검색결과 305건 처리시간 0.026초

IoT 환경에서 실시간 빅 데이터 수신을 위한 센서 게이트웨이에 관한 연구 (Study on the Sensor Gateway for Receive the Real-Time Big Data in the IoT Environment)

  • 신승혁
    • 한국항행학회논문지
    • /
    • 제19권5호
    • /
    • pp.417-422
    • /
    • 2015
  • IoT 환경의 서비스 규모는 센서의 수량에 의하여 결정된다. 센서의 수량이 증가함은 IoT 환경에서 발생하는 데이터의 양도 증가함을 의미한다. 네트워크 환경에서 데이터 폭주 시 네트워크 혼잡제어를 위한 연구와 동적 버퍼운영으로 네트워크를 안정적으로 운영하기 위한 연구들이 있다. 또한 비연결형 네트워크 환경에서 스트림 데이터 처리에 대한 연구들이 있다. 본 연구에서는 IoT환경의 빅데이터를 처리하기 위한 센서 게이트웨이를 제안한다. 이를 위하여 센서 미들웨어를 설계하기 위한 RESTful 을 확인하고, 스트림 데이터를 효율적으로 처리하기 위한 이중버퍼 알고리즘을 적용한다. 마지막으로 제안하는 시스템을 평가하기 위하여 TCP 상의 HTTP 프로토콜을 기반으로 하는 MJpeg 스트림을 이용하여 빅 데이터 트래픽을 발생 시키며, 오픈소스 미디어 플레이어인 VLC를 이용하여 영상 수신 처리율을 이용하여 성능을 비교한다.

농촌 소유역 축산폐수의 유역관리기법 개발 - 자연정화처리를 위한 완충대 적지분석 - (Watershed Scale Management Techniques of the Pollutants from Small Scale Livestock Ranches - Buffer Zone Selection for Natural Purification -)

  • 김성준;이남호;윤광식;홍성구;이윤아
    • 농촌계획
    • /
    • 제6권2호
    • /
    • pp.43-49
    • /
    • 2000
  • Buffer zone selection technique for natural purification of livestock wastewater within a small agricultural watershed was developed using Geographic Information Systems. The technique was applied to $4.12\;km^2$ watershed located in Gosan-myun, Ansung-gun which have 20 livestock farmhouses. As a necessary data for selecting process, feedlot site map, digital Elevation Model (DEM), stream network, soil and land use map were prepared. By using these data, wastewater moving-path tracing program from each feedlot to the stream was developed to get the basic topographic factors; average slope through the paths, distance to the nearest stream and watershed outlet. To identify the vulnerable feedlots for storm event, the grid-based storm runoff model (Kim, 1998; Kim et al., 1998) was adopted. The result helps to narrow down the suitable area of buffer zone, and finally by using subjective but persuasive conditions related to elevation, slope and land use, the suitable buffer zones were selected.

  • PDF

센서 네트워크 기반의 홀리스틱 분산 클러스터링 알고리즘 (A holistic distributed clustering algorithm based on sensor network)

  • 진평;임기욱;남지은;이경오
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2008년도 추계학술발표대회
    • /
    • pp.874-877
    • /
    • 2008
  • Nowadays the existing data processing systems can only support some simple query for sensor network. It is increasingly important to process the vast data streams in sensor network, and achieve effective acknowledges for users. In this paper, we propose a holistic distributed k-means algorithm for sensor network. In order to verify the effectiveness of this method, we compare it with central k-means algorithm to process the data streams in sensor network. From the evaluation experiments, we can verify that the proposed algorithm is highly capable of processing vast data stream with less computation time. This algorithm prefers to cluster the data streams at the distributed nodes, and therefore it largely reduces redundant data communications compared to the central processing algorithm.

질적 주제분석 방법을 이용한 중년여성의 운동지속 경험 (Exercise Adherence in Middle Aged Women with the Qualitative Theme Analysis Method)

  • 이미옥;하양숙
    • Perspectives in Nursing Science
    • /
    • 제8권2호
    • /
    • pp.156-166
    • /
    • 2011
  • Purpose: The purpose of this study was to understand the process of exercise adherence in middle aged women. Methods: The qualitative theme analysis method was used. The participants were 11 middle-aged women who had exercised over 6 months. Data were collected through in-depth interviews and recorded by and transcribed immediately. The data were coded with similar meaning and analysis themes with the constant comparative method. Results: The core theme was Stepping Stones Across the Stream (SSAS). The Stone means the adherence factors in exercise. The stream means the interrupting factors in exercise adherence. The subcategories were 1) feeling of developmental crisis, 2) searching for exit (from the developmental crisis), 3) finding a surprising new world (full of fun), 4) confronting the situation of dropout, and 5) adherence to exercise by SSAS. Conclusion: The predisposition of fun in middle aged women for the adherence of exercise should be explored along with more adherent factors.

  • PDF

전자상거래 데이터의 실시간 분석을 위한 데이터 스트림과 다수 릴레이션 간의 효율적인 연속 조인 처리 기법 (Efficient Processing of Continuous Join Queries between a Data Stream and Multiple Relations for Real-Time Analysis of E-Commerce Data)

  • 김해리;이기용
    • 한국전자거래학회지
    • /
    • 제18권3호
    • /
    • pp.159-175
    • /
    • 2013
  • 최근 들어 전자상거래 데이터의 실시간 공급이 가능해지면서, 전자상거래 데이터를 실시간으로 분석하고자 하는 요구가 급증하고 있다. 이를 위해서는 전자상거래 데이터 스트림과 디스크에 저장된 대규모 릴레이션 간의 연속 조인 질의를 효율적으로 처리하는 것이 매우 중요하다. 본 논문에서는 전자상거래 데이터 스트림과 디스크에 저장된 다수 릴레이션 간의 효율적인 연속 조인 질의 기법을 제안한다. 제안 방법은 기존 방법에 비해 서비스율을 크게 향상시키는 한편, 메모리 사용량을 크게 줄인다. 분석과 다양한 실험을 통해, 제안 방법은 기존 방법에 비해 서비스율과 메모리 사용량에서 더 효율적임을 보인다.

멀티미디어 상연그래프 질의언어와 대수를 이용한 질의처리방법 (A Query Language for Multimedia Presentation Graphs and Query Processing Techniques with Algebra)

  • 이태경
    • 한국정보과학회논문지:데이타베이스
    • /
    • 제27권2호
    • /
    • pp.185-198
    • /
    • 2000
  • 최근 폭발적인 증가를 보이고 있는 멀티미디어 자료의 양과 그 자료들을 이용할 수 있는 하드웨어의 발전은 멀티미디어 상연물을 이용하는 여러 응용 분야에 대한 관심을 촉발시키고 있다. 이에 멀티미디어 상연물의 효과적인 이용을 위해서는 멀티미디어 상연물과 DBMS와의 통합이 필요하다. 이 논문에서는 내용(content)에 근거한 상연물 검색과 검색 처리 기술의 문제를 다룬다. 현재 멀티미디어 상연물 제작 도구(authoring tool)들은 멀티미디어 상연물을 상연 그래프(presentation graph)를 이용하여 표현하고 있으며 상연 그래프는 DAG(directed acyclic graph)이다. 각 노드는 같은 타입의 미디어 스트림을 나타내며 에지는 스트림간의 상연 순서와 동기화 (synchronization) 방법을 나타낸다. 각각의 스트럼에 포함된 정보, 이 정보들간의 순서, 그리고 스트럼간의 상연 순서는 상연의 내용을 구성한다. GCalculus/S(GCalculus with Set Operators)는 calculus에 바탕을 둔 검색언어이며 멀티미디어 자료들의 물리적 특정과 내용을 다룰 수 있다. 개개의 노드 안에서의 정보의 변화와 노드 사이의 순서는 시간 연산자(temporal operator) Next, Connected, Until을 이용하여 표현한다. 검색의 처리를 위하여 객체 대수(object algebra)인 O-Algebra를 확장한다.

  • PDF

GIS를 이용한 미호천의 장래수질예측 (Water Quality Prediction of the Miho Stream Using GIS)

  • 노준우;이상진;이상욱
    • 대한공간정보학회지
    • /
    • 제16권1호
    • /
    • pp.13-21
    • /
    • 2008
  • 본 논문에서는 금강수계의 미호천을 대상으로 GIS를 이용, 2010년을 대상으로 장래수질을 예측하였다. 오염총량관리 기본계획에서 제시된 자료를 기반으로 미호천으로 유입되는 지류별 수계에 대하여 재계산하여 각 수계별 오염부하량을 산정하였으며 이들 정보를 활용하여 지류별 농도를 계산한 다음 미호천의 수질모의를 실시하였다. 수질모의는 대표적인 하천수질 모형인 Qual2E 모형을 사용해서 BOD, TN, TP 등의 대표적인 수질인자에 대한 모의를 실시 하였다. 수계별 오염부하량을 산정한 결과 도시지역을 포함한 무심천 및 보청천의 부하량이 높게 나타남을 알 수 있었고 미호천 전체 수질은 청주 하수처리장의 영향을 직접적으로 받는 것으로 나타났다. 대상유역에서의 효율적 수질관리와 오염총량제에서 제시한 목표수질을 달성하기 위해서는 하수처리장의 고도처리화가 먼저 달성되어야 함을 알 수 있었고, 그 외에도 무심천으로 공급되는 농업용수의 유량을 증가시켜 이를 수질희석의 용도로 사용하는 방안에 대해서 모의를 실시함으로써 수질기준을 만족할 수 있는 적정유량을 산정하여 제시하였다.

  • PDF

데이터 스트림에서 개방 데이터 마이닝 기반의 빈발항목 탐색 (Finding Frequent Itemsets based on Open Data Mining in Data Streams)

  • 장중혁;이원석
    • 정보처리학회논문지D
    • /
    • 제10D권3호
    • /
    • pp.447-458
    • /
    • 2003
  • 기존의 데이터 마이닝 방법들은 기본적으로 지식 발견의 대상이 되는 데이터 집합이 마이닝 작업 시작 이전에 명확히 정의되는 것으로 가정하며 이러한 가정은 고정적으로 정의된 특정 데이터 집합에 내재된 정보 추출이 데이터 마이닝의 목적이 될 때 유효하다. 또한, 기존의 데이터 마이닝 방법들은 대용량의 데이터 집합에 대한 마이닝 결과를 얻는데 있어서 상당한 처리 시간을 요구한다. 따라서, 새로운 트랜잭션 데이터가 지속적으로 추가되는 데이터 스트림에서 추가된 트랜잭션의 정보들을 포함하는 최신의 마이닝 결과를 최대한 빠른 시간 안에 얻기를 기대하는 실시간 처리 환경에서는 기존의 데이터 마이닝 방법을 적용하는 것이 거의 불가능하다. 이러한 목적에 부합하기 위해서 본 논문에서는 새로운 데이터 마이닝 개념인 개방 데이터 마이닝을 제안한다. 개방 데이터 마이닝에서는 새로운 트랜잭션이 발생함에 따라 이전에 발생한 트랜잭션들에 대한 마이닝 결과가 새롭게 갱신되며 따라서 확장된 전체 트랜잭션 집합에 대한 마이닝 결과를 빠르게 얻을 수 있다. 이러한 방법을 효과적으로 구현하기 위해서는 새롭게 출현한 항목에 대한 지연추가와 이전 데이터 집합에 출현한 항목들 중에서 중요하지 않는 항목에 대한 전지작업이 병행되어야 한다. 논문에서 제안하는 알고리즘은 알고리즘의 특성을 파악하기 위한 일련의 다양한 실험을 통해서 검증된다.

토지이용변화에 따른 한천유역의 홍수유출 변동 분석 (Flood Discharge Analysis on Land Use Changes in Han Stream, Jeju Island)

  • 양세창;양성기;이준호;정우열;고광효
    • 한국환경과학회지
    • /
    • 제24권4호
    • /
    • pp.425-435
    • /
    • 2015
  • A number of projects for development have been done continuously due to the increase of tourist in Jeju Island. However flood disaster countermeasure due to urbanization is not considered during this development projects. This study is to make basic process for the flood estimation in Han stream of Jeju Island. The variation of stream discharge due the every 5 years' land use change from 1980 to 2005. Data for flood events (rainfall and discharge) were collected for HEC-HMS model. Clark method was used for unit hydrograph analysis. For the estimation of Clark unit hydrograph parameters, Kraven II and Sabol's empirical equations were applied. The peak discharge increased 9.9~33.67% and total discharge amount increased 12.53~30.21%. Also, time of concentration for peak discharge was reduced by 10 minutes for each event.

다중시기 영상자료를 이용한 금강하류의 하중도 퇴적환경 변화 (Sedimentary Environment Change in Mid-channel Bar of the Lower Geum River Using Multi-temporal Satellite Data)

  • 홍기병;장동호
    • 환경영향평가
    • /
    • 제18권3호
    • /
    • pp.171-183
    • /
    • 2009
  • This study aims to analyze the sedimentary environment change in mid-channel bar of the lower Geum river basin after the construction of the estuary barrage using multi-temporal satellite data and GIS. The sedimentary environment changes were observed in mid-channel bar areas. The mid-channel bar F was found to have been newly formed for 10 years(1996-2006), whereas the mid-channel bar B located between mid-channel bar A and C has disappeared by erosion during the same periods. When examined by section, the areas of the mid-channel bar in the upper stream section from the Yipo's reference point generally increased due to the prevailing sedimentary environments, and those of the downstream section decreased where corrosive environments are dominant. In ternms of the centroid movement, the mid-channel bars grew up toward the downstream by switching erosion and accumulation, as sedimentation was prevailing in the downstream area of mid-channel bars and corrosion was dominant in the upper stream. Through grain size analysis, the study areas are divided into three sections according to the average grain size. In Section I, the mid-channel bars were formed as a result of sedimentary process of tides in the past. In Section II, the mid-channel bars were formed partly through the sedimentary process of rivers although the sedimentary process of tides is prevailing. In Section III, the mid-channel bars were formed mainly through the sedimentary process of rivers, even if it showed the sedimentary process of tides in the past.