• 제목/요약/키워드: 분산 모니터링

검색결과 411건 처리시간 0.036초

Apache Kafka에서 효율적인 과부하 측정을 위한 모니터링 도구 (Monitoring Tools for Efficient Overload Measurements in Apache Kafka)

  • 방지원;손시운;문양세;최미정
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2017년도 추계학술발표대회
    • /
    • pp.52-54
    • /
    • 2017
  • 실시간으로 빠르게 발생하는 대용량 데이터를 다루기 위해 Apache Storm, Apache Spark 등 실시간 데이터 스트림 처리 기술에 대한 연구가 활발하다. 대부분의 실시간 처리 기술들은 단독으로 사용하기에 어려움이 있으며, 데이터 스트림의 입출력을 위해 메시징 시스템과 함께 사용하는 것이 일반적이다. Apache Kafka는 대표적인 분산 메시징 시스템으로써, 실시간으로 발생하는 대용량의 로그 데이터를 전달하는데 특화된 시스템이다. 현재 Kafka를 위한 다양한 성능 모니터링 도구들이 존재한다. 이러한 모니터링 도구들은 Kafka에서 처리되는 데이터의 양 이외에도 유입 데이터의 크기, 수집 속도, 처리 속도 등 다양한 데이터들을 관찰할 수 있다. 본 논문은 Kafka에서 제공하는 도구와 오픈 소스로 제공되는 여러 개의 도구들을 비교하여, 향후 Kafka의 로드 쉐딩에 대한 연구에 적용할 수 있는 최적의 모니터링 도구를 선별하고자 한다.

분산 Lan 세그먼트관리를 위한 LAN 모니터링 시스템의 설계 및 구현 (Design and Implementation of LAN Monitoring System for managing Distributed Lan Segment)

  • 이원혁;조규억;최영수;정진욱
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2000년도 추계학술발표논문집 (하)
    • /
    • pp.1001-1004
    • /
    • 2000
  • 본 논문에서는 여러 개의 Lan 세그먼트를 관리하며 패킷의 분석과 이용현황 등을 비교, 분석하기 쉽게 해주는 Lan 모니터링 매니저 시스템과 각 세그먼트별로 패킷을 수집하는 LAN 모니터링 에이전트를 설계 및 구현하였다. 네트워크의 규모가 커지고 관리를 요하는 장비가 증가함에 따라 기존의 NMS 로는 관리에 있어 한계를 보여왔다. 이에 Lan 세그먼트단위의 관리를 하는 RMON 에이전트의 필요성이 대두되는데, 이 또한 여러 Lan 세그먼트를 관리하기 위해 RMON 장비를 세그먼트마다 탑재해야 하는 등 비용과 관리의 어려움이 있다. 따라서 본 논문에서는 소프트웨어적으로 구현하여 간편하게 망 관리를 할 수 있는 Lan 모니터링 시스템을 제시한다.

  • PDF

CAN을 이용한 선박용 탱크 모니터링 시스템 개발 (Development of Tank Monitoring System using CAN)

  • 박진우;지석준;이장명
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2000년도 하계학술대회 논문집 D
    • /
    • pp.2507-2509
    • /
    • 2000
  • 선박내에는 많은 종류의 탱크들이 산재하고 있으며, 잔존량 및 이상유무를 실시간을 취합하여, 모니터링 할 수 있는 시스템은 선박에 있어서 필수적이다. 기존의 모니터링 시스템에서는 데이터의 종류가 많은 경우, 이를 구분하기 위한 처리와 전송과정에서 발생되는 전송 에러에 대한 처리를 호스트에서 수행하므로 많은 부하가 걸리게 된다. 따라서, 본 논문에서는 에러 자동검출 및 재 전송의 자동 수행 및 분산 제어 기능을 제공하는 CAN을 이용해 탱크 모니터링 시스템을 설계하고, 구현한다.

  • PDF

3차원 기반의 모니터링 시스템과 클라우드 컴퓨팅을 이용한 파노라믹 비디오 서비스 (3D-Based Monitoring System and Cloud Computing for Panoramic Video Service)

  • 조용우;석주명;서덕영
    • 한국통신학회논문지
    • /
    • 제39B권9호
    • /
    • pp.590-597
    • /
    • 2014
  • 본 논문은 고품질 파노라마 영상 획득을 위하여 대상 공간을 여러 대의 카메라로 촬영 시, 촬영 정보를 제공하는 모니터링 시스템과 클라우드 컴퓨팅을 이용한 생성 과정 분산 처리에 관한 것이다. 파노라믹 비디오의 특성상 이웃 카메라 간 일정한 중복영역을 가져야 하지만 이로 인하여 동일한 촬영 대상에 대해 촬영 화각이 다르고, 카메라의 물리적인 크기로 인하여 촬영 중심점을 동일하게 맞추기 어려운 상황에서 2D 입력 영상기반으로 모니터링 하여 카메라를 보정하는 경우 시차원인으로 오보정이 발생하는 문제가 있다. 이를 해결하기 위하여 카메라별 촬영 화각에 따라 3차원으로 투영하여 모니터링 함으로써 카메라 오보정 문제를 최소화하고 획득 영상의 품질을 높이는 3차원 기반 모니터링 시스템을 제안한다. 또한 여러 영상을 하나의 영상으로 합성하는 파노라믹 비디오 생성알고리즘은 합성 정보추출과 합성, 두 부분으로 나눌 수 있는데 이를 클라우드와 클라이언트에 적절히 분산하여 고화질의 파노라믹 비디오를 효율적으로 서비스 하는 방법에 대해 제안한다.

데이터 스트림 처리에 관한 연구 동향 (Research Directions for Data Stream Processing)

  • 안동찬;박석
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2005년도 한국컴퓨터종합학술대회 논문집 Vol.32 No.1 (B)
    • /
    • pp.34-36
    • /
    • 2005
  • 데이터 스트림 처리에 관한 연구들은 최근 컴퓨터 과학 분야에서 가장 않은 관심을 가지고 있고 흥미있는 이슈 중 하나이다. 이러한 경향은 다양한 어플리케이션의 출현으로 질의 저리에 대한 효율적인 방법과 새로운 데이터 스트림의 모델을 필요로 하기 때문일 것이다. 본 논문은 그 중에서도 데이터 스트림 분야의 가장 중요한 부분으로 생각되는 스케줄링, 적절한 질의 처리, 부하 분산, 근사화, 분산 데이터 모니터링에 대한 연구 분석을 도모하였다.

  • PDF

국토공간자료의 제공을 위한 공간정보시스템의 설계전략 (System Design Strategies for the Spatial Information Services based on the National Land Monitoring)

  • 서동조
    • 한국GIS학회:학술대회논문집
    • /
    • 한국GIS학회 2008년도 공동춘계학술대회
    • /
    • pp.159-163
    • /
    • 2008
  • 현재 우리나라 국토공간자료의 이용은 자료에 대한 낮은 접근성, 분석방법의 일관성 유지의 곤란, 결과의 미공유에 따른 중복작업, 자료의 분산에 따른 즉각적인 의사결정의 지연 등의 문제를 지니고 있다. 이를 위하여 다양한 국토모니터링 정보를 통합, 처리하여 효율적으로 제공하는 시스템 개발이 요구되고 있다. 이 연구에서는 현재까지 구축된 국토모니터링과 관련된 공간정보시스템의 사례를 조사하고, 특성을 정리하여 국토모니터링을 위한 통합된 공간정보시스템이 갖추어야할 내용과 설계전략을 제시하였다.

  • PDF

EJB서버 원격 제어 시스템 구현 (An implementation of remote control system for EJB Server)

  • 노명찬;정승욱;서범수
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 가을 학술발표논문집 Vol.30 No.2 (3)
    • /
    • pp.190-192
    • /
    • 2003
  • 본 논문에서는 EJB 서버에 대한 제어 시스템 구현 방법에 관한 것으로써, 원격지에 분산되어 있는 EJB 서버를 관리 도구상에서 분산되어 있는 EJB 서버들을 마치 로컬상에서 제어하는 것과 동일하게 구동하고, 정지하며, 상태 정보를 모니터링 할 수 있는 원격 제어 시스템 구현에 대해 설명한다.

  • PDF

비정상 트래픽 분석을 위한 네트워크 모니터링 기반의 네트워크 성능 분석 시스템 (A Network Performance Analysis System based on Network Monitoring for Analyzing Abnormal Traffic)

  • 김시홍;구자환;김승해;최장원;안성진
    • 융합보안논문지
    • /
    • 제4권3호
    • /
    • pp.1-8
    • /
    • 2004
  • Computational Grid나 Data Grid와 같은 대규모 분산 시스템은 장애 탐지, 성능 측정, 성능튜닝, 성능 예측, 스케줄링, 보안 분석 등의 작업을 위해 많은 량의 모니터링 데이터를 필요로 한다. 네트워크 특성을 나타내는 지표들은 네트워크 모니터링 시스템을 통해 얻어질 수 있으며 시스템에 의해 축적된 자료는 상기한 작업의 정확한 분석을 돕는다. 본 논문에서는 네트워크 모니터링 시스템의 한 형태로 네트워크 모니터링기반의 네트워크 성능 및 보안 분석 시스템을 소개한다. 본 시스템은 이용자 중심으로 네트워크 성능 및 보안 데이터를 제공하며, 이용자가 원격지의 네트워크 특성을 측정 환경에 따라 변화해 가며 측정할 수 있게 함으로써 해당 원격지의 네트워크 서비스를 가늠해 볼 수 있게 한다.

  • PDF

수퍼컴퓨터 그리드 어카운팅 시스템을 위한 서버 어카운팅 정보 모니터링 서비스 (Server Accounting Information monitoring Service of Super Computer Grid Accounting)

  • 장경익;김법균;황호전;두길수;곽의종;안동언;정성종
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 봄 학술발표논문집 Vol.30 No.1 (C)
    • /
    • pp.133-135
    • /
    • 2003
  • IT 기술 발전과 초고속 네트웍을 기반으로 지리적으로 분산된 리소스들을 공유하며 강력한 컴퓨팅 파워를 낼 수 있는 그리드 환경에 관한 연구가 활발히 진행되고 있다 본 논문에서는 그리드 환경을 구축하기 위한 기술 중에 일련의 작업을 마친 후 발생하는 어카운팅 정보의 수집에 관해서 기술한다. 특히 현재 활발히 연구되고 있는 수퍼컴퓨터를 기반으로 어카운팅 정보를 수집하기 위해 설계한 어카운팅 정보 모니터링 서비스 구조와 어카운팅 정보를 수집하는 기술에 대해서 상세히 설명한다.

  • PDF