• Title/Summary/Keyword: 분산 모니터링

Search Result 411, Processing Time 0.028 seconds

Monitoring Tools for Efficient Overload Measurements in Apache Kafka (Apache Kafka에서 효율적인 과부하 측정을 위한 모니터링 도구)

  • Bang, Jiwon;Son, Siwoon;Moon, Yang-Sae;Choi, Mi-Jung
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2017.11a
    • /
    • pp.52-54
    • /
    • 2017
  • 실시간으로 빠르게 발생하는 대용량 데이터를 다루기 위해 Apache Storm, Apache Spark 등 실시간 데이터 스트림 처리 기술에 대한 연구가 활발하다. 대부분의 실시간 처리 기술들은 단독으로 사용하기에 어려움이 있으며, 데이터 스트림의 입출력을 위해 메시징 시스템과 함께 사용하는 것이 일반적이다. Apache Kafka는 대표적인 분산 메시징 시스템으로써, 실시간으로 발생하는 대용량의 로그 데이터를 전달하는데 특화된 시스템이다. 현재 Kafka를 위한 다양한 성능 모니터링 도구들이 존재한다. 이러한 모니터링 도구들은 Kafka에서 처리되는 데이터의 양 이외에도 유입 데이터의 크기, 수집 속도, 처리 속도 등 다양한 데이터들을 관찰할 수 있다. 본 논문은 Kafka에서 제공하는 도구와 오픈 소스로 제공되는 여러 개의 도구들을 비교하여, 향후 Kafka의 로드 쉐딩에 대한 연구에 적용할 수 있는 최적의 모니터링 도구를 선별하고자 한다.

Design and Implementation of LAN Monitoring System for managing Distributed Lan Segment (분산 Lan 세그먼트관리를 위한 LAN 모니터링 시스템의 설계 및 구현)

  • Lee, Won-Hyuk;Joe, Kyu-Oak;Choi, Young-Su;Chung, Jin-Wook
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2000.10b
    • /
    • pp.1001-1004
    • /
    • 2000
  • 본 논문에서는 여러 개의 Lan 세그먼트를 관리하며 패킷의 분석과 이용현황 등을 비교, 분석하기 쉽게 해주는 Lan 모니터링 매니저 시스템과 각 세그먼트별로 패킷을 수집하는 LAN 모니터링 에이전트를 설계 및 구현하였다. 네트워크의 규모가 커지고 관리를 요하는 장비가 증가함에 따라 기존의 NMS 로는 관리에 있어 한계를 보여왔다. 이에 Lan 세그먼트단위의 관리를 하는 RMON 에이전트의 필요성이 대두되는데, 이 또한 여러 Lan 세그먼트를 관리하기 위해 RMON 장비를 세그먼트마다 탑재해야 하는 등 비용과 관리의 어려움이 있다. 따라서 본 논문에서는 소프트웨어적으로 구현하여 간편하게 망 관리를 할 수 있는 Lan 모니터링 시스템을 제시한다.

  • PDF

Development of Tank Monitoring System using CAN (CAN을 이용한 선박용 탱크 모니터링 시스템 개발)

  • Park, Jin-Woo;Ji, Suk-Jun;Lee, Jang-Myung
    • Proceedings of the KIEE Conference
    • /
    • 2000.07d
    • /
    • pp.2507-2509
    • /
    • 2000
  • 선박내에는 많은 종류의 탱크들이 산재하고 있으며, 잔존량 및 이상유무를 실시간을 취합하여, 모니터링 할 수 있는 시스템은 선박에 있어서 필수적이다. 기존의 모니터링 시스템에서는 데이터의 종류가 많은 경우, 이를 구분하기 위한 처리와 전송과정에서 발생되는 전송 에러에 대한 처리를 호스트에서 수행하므로 많은 부하가 걸리게 된다. 따라서, 본 논문에서는 에러 자동검출 및 재 전송의 자동 수행 및 분산 제어 기능을 제공하는 CAN을 이용해 탱크 모니터링 시스템을 설계하고, 구현한다.

  • PDF

3D-Based Monitoring System and Cloud Computing for Panoramic Video Service (3차원 기반의 모니터링 시스템과 클라우드 컴퓨팅을 이용한 파노라믹 비디오 서비스)

  • Cho, Yongwoo;Seok, Joo Myoung;Suh, Doug Young
    • The Journal of Korean Institute of Communications and Information Sciences
    • /
    • v.39B no.9
    • /
    • pp.590-597
    • /
    • 2014
  • This paper proposes multi-camera system that relies on 3D views for panoramic video and distribution method about panoramic video generation algorithm by using cloud computing. The proposed monitoring system monitors the projected 3D model view, instead of individual 2D views, to detect image distortions. This can minimize compensation errors caused by parallax, thereby improving the quality of the resulting panoramic video. Panoramic video generation algorithm can be divided into registration part and compositing part. Therefore we propose off-loading method of these parts with cloud computing for panoramic video service.

Research Directions for Data Stream Processing (데이터 스트림 처리에 관한 연구 동향)

  • An Dong-Chan;Park Seog
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2005.07b
    • /
    • pp.34-36
    • /
    • 2005
  • 데이터 스트림 처리에 관한 연구들은 최근 컴퓨터 과학 분야에서 가장 않은 관심을 가지고 있고 흥미있는 이슈 중 하나이다. 이러한 경향은 다양한 어플리케이션의 출현으로 질의 저리에 대한 효율적인 방법과 새로운 데이터 스트림의 모델을 필요로 하기 때문일 것이다. 본 논문은 그 중에서도 데이터 스트림 분야의 가장 중요한 부분으로 생각되는 스케줄링, 적절한 질의 처리, 부하 분산, 근사화, 분산 데이터 모니터링에 대한 연구 분석을 도모하였다.

  • PDF

System Design Strategies for the Spatial Information Services based on the National Land Monitoring (국토공간자료의 제공을 위한 공간정보시스템의 설계전략)

  • Seo, Dong-Jo
    • Proceedings of the Korean Association of Geographic Inforamtion Studies Conference
    • /
    • 2008.06a
    • /
    • pp.159-163
    • /
    • 2008
  • 현재 우리나라 국토공간자료의 이용은 자료에 대한 낮은 접근성, 분석방법의 일관성 유지의 곤란, 결과의 미공유에 따른 중복작업, 자료의 분산에 따른 즉각적인 의사결정의 지연 등의 문제를 지니고 있다. 이를 위하여 다양한 국토모니터링 정보를 통합, 처리하여 효율적으로 제공하는 시스템 개발이 요구되고 있다. 이 연구에서는 현재까지 구축된 국토모니터링과 관련된 공간정보시스템의 사례를 조사하고, 특성을 정리하여 국토모니터링을 위한 통합된 공간정보시스템이 갖추어야할 내용과 설계전략을 제시하였다.

  • PDF

An implementation of remote control system for EJB Server (EJB서버 원격 제어 시스템 구현)

  • 노명찬;정승욱;서범수
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2003.10c
    • /
    • pp.190-192
    • /
    • 2003
  • 본 논문에서는 EJB 서버에 대한 제어 시스템 구현 방법에 관한 것으로써, 원격지에 분산되어 있는 EJB 서버를 관리 도구상에서 분산되어 있는 EJB 서버들을 마치 로컬상에서 제어하는 것과 동일하게 구동하고, 정지하며, 상태 정보를 모니터링 할 수 있는 원격 제어 시스템 구현에 대해 설명한다.

  • PDF

A Network Performance Analysis System based on Network Monitoring for Analyzing Abnormal Traffic (비정상 트래픽 분석을 위한 네트워크 모니터링 기반의 네트워크 성능 분석 시스템)

  • Kim, So-Hung;Koo, Ja-Hwan;Kim, Sung Hae;Choi, Jang-Won;An, Sung-Jin
    • Convergence Security Journal
    • /
    • v.4 no.3
    • /
    • pp.1-8
    • /
    • 2004
  • Large distributed systems such as computational and data grids require that a substantial amount of monitoring data be collected for various tasks such as fault detection, performance analysis, performance tuning, performance prediction, security analysis and scheduling. to cope with this problem, they are needed network monitoring architecture which can collect various network characteristic and analyze network security state. In this paper, we suggest network performance and security analysis system based on network monitoring. The System suggest that users can see distance network state with tuning network parameters.

  • PDF

Server Accounting Information monitoring Service of Super Computer Grid Accounting (수퍼컴퓨터 그리드 어카운팅 시스템을 위한 서버 어카운팅 정보 모니터링 서비스)

  • 장경익;김법균;황호전;두길수;곽의종;안동언;정성종
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2003.04d
    • /
    • pp.133-135
    • /
    • 2003
  • IT 기술 발전과 초고속 네트웍을 기반으로 지리적으로 분산된 리소스들을 공유하며 강력한 컴퓨팅 파워를 낼 수 있는 그리드 환경에 관한 연구가 활발히 진행되고 있다 본 논문에서는 그리드 환경을 구축하기 위한 기술 중에 일련의 작업을 마친 후 발생하는 어카운팅 정보의 수집에 관해서 기술한다. 특히 현재 활발히 연구되고 있는 수퍼컴퓨터를 기반으로 어카운팅 정보를 수집하기 위해 설계한 어카운팅 정보 모니터링 서비스 구조와 어카운팅 정보를 수집하는 기술에 대해서 상세히 설명한다.

  • PDF