• 제목/요약/키워드: 데이터 모니터링

검색결과 2,659건 처리시간 0.035초

엔터프라이즈 레벨의 데이터 파이프라인 모니터링 시스템 개발 (Development of Enterprise-Level Data Pipeline Monitoring System)

  • 채소영;박지수;김혜미
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2023년도 추계학술발표대회
    • /
    • pp.331-334
    • /
    • 2023
  • 데이터 처리 과정에서 데이터 손실 및 장애 상황을 감지하고 예방하기 위한 모니터링 시스템의 필요성이 증가하고 있다. 복잡한 데이터 파이프라인에서 각 단계를 실시간으로 관찰하고 문제 상황에 신속하게 대응하기 위해서는 종합적인 모니터링 시스템을 구축하는 것이 중요하다. 본 논문에서는 엔터프라이즈 레벨의 파이프라인 모니터링 시스템을 개발하여 데이터 파이프라인의 안정성을 향상하고 데이터의 신뢰성을 높이고자 하였다. 모니터링을 데이터, 애플리케이션, 운영, 그리고 외부서비스 및 인프라 관점으로 분류 및 설계하고 각 관점에 따라 어떤 방식으로 활용되었는지 소개한다. 본 논문에서 개발한 모니터링 시스템을 통해 비즈니스 및 연구 분야의 데이터 처리 작업을 보다 효과적으로 관리하고, 문제 상황을 조기에 탐지하여 안정성을 향상시킬 수 있을 것으로 기대된다.

네트워크 모니터링을 위한 OLAP 구현 (OLAP Implementation for Network Monitoring)

  • 양우석;이원석
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2008년도 제38차 하계학술발표논문집 16권1호
    • /
    • pp.131-135
    • /
    • 2008
  • 데이터스트림 환경에서 무한히 연속적으로 생성되는 데이터를 처리하고 분석하 는방법에 관한 많은 연구가진행중이다. 본 논문은 데이터스트림의 한 예인 네트워크 트래픽을 모니터링하기 위한 OLAP 구현에 대하여 기술한다. 제안하는 OLAP 시스템은 기존의 네트워크 모니터링 툴이 제공하지 못했던 다양한 연산을 지원하여 유연한 분석을 가능하게 하며, 정적인 데이터를 처리하는 데이터웨어하우스에서만 적용되던 OLAP을 데이터스트림 환경에 적용할 수 있게 한다.

  • PDF

마이크로 데이터센터의 환경 모니터링 시스템 개발 연구 (A Study on the Development for Environment Monitoring System of Micro Data Center)

  • 이갑래;김영식
    • 문화기술의 융합
    • /
    • 제8권2호
    • /
    • pp.355-360
    • /
    • 2022
  • 본 연구에서는 마이크로 데이터 센터의 환경 모니터링 시스템(EMS)을 설계하고 개발하는 방법을 나타낸다. 설계하는 환경 모니터링 시스템은 IoT 센서 및 싱글보드 컴퓨터를 이용하여 데이터센터 운영환경을 실시간으로 감지하여 데이터를 해석하고 운영환경을 모니터한다. 먼저, EMS 하드웨어 플랫폼 및 IoT 센싱 패키지 설계 방법에 대하여 나타낸다. 또한 서로 다른 프로토콜을 갖는 IoT 센서에 대한 데이터 수집 SW을 설계하고 원격에서 모니터링이 가능한 EMS 모니터링 SW를 개발한다. 데이터 수집 SW는 센서 수집 모듈과 수집 메니저 모듈로 구성된다. EMS 소프트웨어는 마이크로 서비스 아키텍츠(MSA) 개념을 적용하여 설계하며 각각의 서비스는 독립적인 비즈니스 로직을 포함한다.

자율운항선박 선내 테이터 획득 및 모니터링

  • 이재한
    • 한국항해항만학회:학술대회논문집
    • /
    • 한국항해항만학회 2022년도 춘계학술대회
    • /
    • pp.129-130
    • /
    • 2022
  • 선박 상태를 모니터링 함에 있어, 선내 내부망의 보안을 해치지 않는 상황에서 선내의 데이터를 획득하여 별도의 통신망으로 원격통신을 원활하게 하기 위한 데이터 습득 방법 연구하고, 데이터 지연시간을 분석한다.

  • PDF

효율적인 서비스 모니터링을 위한 모니터링 가능한 서비스 설계 기법 (A Method to Designing Managed Service for Efficient Service Monitoring)

  • 이현민;김수동
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2010년도 한국컴퓨터종합학술대회논문집 Vol.37 No.1(A)
    • /
    • pp.84-89
    • /
    • 2010
  • 서비스 지향 컴퓨팅은 서비스를 동적으로 조합하여 사용자가 요구하는 비즈니스 프로세스를 개발하는 효율적인 개발 방법이다. 서비스는 분산환경에 배치되고 인터페이스만을 외부로 노출하여 내부의 세부사항은 숨긴다. 이러한 서비스의 특징은 서비스 사용자가 서비스의 품질을 알기 어렵게 만든다. 서비스 소비자가 중요한 도메인에서 서비스를 사용하려면 서비스 품질(QoS)이 보장되어야 한다. 서비스 품질을 보장하기 위해서는 서비스 품질 측정이 먼저 선행되어야 한다. 하지만 현재까지 서비스 품질 모델의 표준화가 이루어 지지 않아 모니터링 해야 할 명확한 대상이 정의되지 않았고, 그로 인해 서비스 모니터링 방법 및 모니터링 효율성에 대한 연구는 거의 이루어 지지 않았다. 이와 같은 문제를 해결하기 위하여, 본 논문에서는 먼저 서비스 모니터링 해야 할 데이터를 명확하게 정의한다. 또한 정의된 모니터링 데이터를 분류하고 분류된 데이터의 수집을 위한 모니터링 가능한 서비스 설계방법을 제안한다. 마지막으로, 실험을 통해 제안된 기법의 실효성과 효율성을 보여준다.

  • PDF

이종 Cloud Service Brokerage에 적용 가능한 실시간 모니터링 시스템 연구 (Study of Real-time Monitoring System Applicable to Heterogeneous Cloud Service Brokerage)

  • 김바울;조철용;오동휘;김명진
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2017년도 춘계학술발표대회
    • /
    • pp.637-640
    • /
    • 2017
  • 최근 클라우드 기술이 확산되면서 여러 기업이 자신만의 클라우드를 다양하게 제공하고 있으며 세계 각지에 흩어져 있는 다양한 클라우드 공급자들과 여러 프라이빗 클라우드를 연결하여 하나의 서비스를 제공하는 클라우드 서비스 브로커리지(Cloud Services Brokerage) 기술이 등장하게 되었다. 하지만 현재의 CSB 기술은 가상 자원 관리, 가상 머신 라이프 사이클 관리에 초점이 맞추어져 있으며 CSB에서 제공되는 모니터링 요소는 사용자의 복잡한 요구를 만족하기에는 부족한 실정이다. 또한 추가 모니터링 도구를 사용하는 경우도 CSB의 데이터와의 일관성을 만족하지 않는 문제가 있다. 따라서 본 논문에서는 이종 CSB와 연동이 가능한 실시간 모니터링 시스템을 제안한다. 본 논문에서 제안하는 모니터링 기술은 Scalr 및 CompatibleOne을 사용하여 주기적으로 메타데이터 동기화를 진행하며 데이터 일관성을 충족시키고 다양한 모니터링 데이터를 실시간으로 수집하여 사용자에게 제공한다.

안정적인 소각재 재활용을 위한 데이터 모니터링 시스템 설계 및 구축 (Design and Construction of Data Monitoring System for Stable Cinder Reuse)

  • 김귀정;한정수
    • 한국산학기술학회논문지
    • /
    • 제8권5호
    • /
    • pp.1082-1086
    • /
    • 2007
  • 본 연구는 국내에서 발생되는 소각재를 재활용하여 벽돌 생산을 하는 공장에서의 이원화된 작업현황을 일원화 할 수 있는 데이터 모니터링 시스템 구축을 목적으로 한다. 모니터링 시스템은 상태관리 프로세스, 위치관리 프로세스, 불량관리 프로세스, 상황관리 프로세스 등의 데이터 관리 프로세스를 이용해 데이터를 자동 관리하도록 설계하였다. 본 연구에서는 RFID 태그를 이용하여 각 공정의 상황 정보를 수집하고 수집된 정보를 가공하여 데이터 모니터링 시스템에 전송한다. 이러한 시스템을 통해 분석된 데이터는 소각재를 재활용하여 벽돌 생산을 하는 공장에서 공정자동화, 불량률 최소화, 실시간 모니터링, 적재 관리를 통해 생산 공정을 효율적으로 관리할 수 있다.

  • PDF

동적인 하둡 응용 모니터링 서비스를 위한 시계열 데이터 관리 방안에 관한 연구 (A Study on Time-series Data Management Scheme for Dynamic Hadoop Application Monitoring Service)

  • 곽재혁;최지은;김상완;변은규
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2018년도 추계학술발표대회
    • /
    • pp.60-62
    • /
    • 2018
  • 본 논문에서는 리눅스에서 제공하는 성능 분석 도구들을 활용하여 사용자가 원하는 모니터링 매트릭을 동적으로 등록하고 모니터링 할 수 있는 확장 가능한 하둡 응용 모니터링 서비스의 시계열 데이터 관리 방안을 다룬다. 본 논문에서는 이를 위해서 시계열 데이터를 위한 관계형 데이터베이스인 TimeScaleDB를 사용하였으며 동적으로 변경가능한 모니터링 메트릭 데이터가 하이퍼테이블의 관리를 통해서 구조화된 밀집 데이터 형태로 효율적으로 관리될 수 있음을 제시하였다.

티타늄 용접 모니터링 시스템 연구 (Research of Titanium Weld Monitoring Systems)

  • 류진보;김관형
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2016년도 추계학술대회
    • /
    • pp.674-675
    • /
    • 2016
  • 원자번호 22번에 해당하는 티타늄(titanium)은 매우 단단하며 가볍고, 부식에도 강한 금속이다. 티타늄은 비슷한 강도의 강철에 비해서 가볍고 알루미늄 합금에 비해 2배나 강력하다. 뿐만 아니라 티타늄은 바닷물에도 부식되지 않아 선박이다 해양플랜트 산업에서 많이 쓰이는 금속이기도 하다. 본 연구는 해양플랜트 건설 사업에 쓰이는 티타늄 용접에 대한 모니터링 시스템을 연구하는데 있다. 티타늄 용접공정에 사용되는 용접 파라메타는 용접 전압, 전류, 용접 토치의 위빙속도 및 와이어 공급 속도로 선정하였으며, 이러한 용접 파라메타를 계측할 수 있는 MCU 기반의 계측 보드를 설계하여 TCP/IP 통신을 기반으로 원격지로 용접 데이터를 전송하도록 하였으며, 이러한 데이터를 실시간으로 데이터를 그래프로 표현하도록 개발하였다. 이러한 용접 데이터에 대한 모니터링을 통하여 용접 시 발생하는 다양한 현상을 파악할 수 있도록 하였다. 본 연구를 통해서 티타늄 용접 시 발생하는 각종 데이터를 실시간으로 모니터링 할 수 있도록 개발하였으며, 데이터베이스에 저장된 기록을 통해서 용접 시 발생한 전체적인 용접 과정을 날짜와 시간별로 저장하여 용접과정에서 발생하는 전 과정을 관리할 수 있도록 하여 어떤 부분에서 잘못된 용접이 발생했는지 파악할 수 있음을 확인하였다.

  • PDF

소각재 재활용을 위한 에이전트 기반 RFID 모델 설계 (Agent-Based RFID Model Design for Cinder Reuse)

  • 김귀정
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2007년도 춘계학술발표대회
    • /
    • pp.201-204
    • /
    • 2007
  • 본 논문은 소각재 재활용 모니터링 시스템 구현을 위한 에이전트 기반의 RFID 모델을 설계한다. RFID를 이용한 모니터링 시스템은 상태관리 에이전트, 위치관리 에이전트, 불량관리 에이전트, 상황관리 에이전트 등의 데이터 관리 에이전트를 이용해 데이터를 자동 관리하고, 대용량의 데이터를 처리하기 위해 대용량 데이터 처리 에이전트를 이용한다. 안정적인 소각재 재활용을 위한 에이전트 기반 데이터 모니터링 시스템의 개발은 산업체 전반에 걸쳐있는 기계화, 수작업화 된 공정을 실시간 자동화 공정으로 개발하는 획기적인 방법이 될 것이다.

  • PDF