• Title/Summary/Keyword: 데이터 모니터링

검색결과 2,659건 처리시간 0.039초

Development of Enterprise-Level Data Pipeline Monitoring System (엔터프라이즈 레벨의 데이터 파이프라인 모니터링 시스템 개발)

  • So-Young Chae;Ji-Su Park;Hye-Mi Kim
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 한국정보처리학회 2023년도 추계학술발표대회
    • /
    • pp.331-334
    • /
    • 2023
  • 데이터 처리 과정에서 데이터 손실 및 장애 상황을 감지하고 예방하기 위한 모니터링 시스템의 필요성이 증가하고 있다. 복잡한 데이터 파이프라인에서 각 단계를 실시간으로 관찰하고 문제 상황에 신속하게 대응하기 위해서는 종합적인 모니터링 시스템을 구축하는 것이 중요하다. 본 논문에서는 엔터프라이즈 레벨의 파이프라인 모니터링 시스템을 개발하여 데이터 파이프라인의 안정성을 향상하고 데이터의 신뢰성을 높이고자 하였다. 모니터링을 데이터, 애플리케이션, 운영, 그리고 외부서비스 및 인프라 관점으로 분류 및 설계하고 각 관점에 따라 어떤 방식으로 활용되었는지 소개한다. 본 논문에서 개발한 모니터링 시스템을 통해 비즈니스 및 연구 분야의 데이터 처리 작업을 보다 효과적으로 관리하고, 문제 상황을 조기에 탐지하여 안정성을 향상시킬 수 있을 것으로 기대된다.

OLAP Implementation for Network Monitoring (네트워크 모니터링을 위한 OLAP 구현)

  • Yang, Woo-Sock;Lee, Won-Suk
    • Proceedings of the Korean Society of Computer Information Conference
    • /
    • 한국컴퓨터정보학회 2008년도 제38차 하계학술발표논문집 16권1호
    • /
    • pp.131-135
    • /
    • 2008
  • 데이터스트림 환경에서 무한히 연속적으로 생성되는 데이터를 처리하고 분석하 는방법에 관한 많은 연구가진행중이다. 본 논문은 데이터스트림의 한 예인 네트워크 트래픽을 모니터링하기 위한 OLAP 구현에 대하여 기술한다. 제안하는 OLAP 시스템은 기존의 네트워크 모니터링 툴이 제공하지 못했던 다양한 연산을 지원하여 유연한 분석을 가능하게 하며, 정적인 데이터를 처리하는 데이터웨어하우스에서만 적용되던 OLAP을 데이터스트림 환경에 적용할 수 있게 한다.

  • PDF

A Study on the Development for Environment Monitoring System of Micro Data Center (마이크로 데이터센터의 환경 모니터링 시스템 개발 연구)

  • Lee, Kap Rai;Kim, Young Sik
    • The Journal of the Convergence on Culture Technology
    • /
    • 제8권2호
    • /
    • pp.355-360
    • /
    • 2022
  • In this paper, we present design and developing method for EMS(environment monitoring system) of micro data center. This developing EMS monitors operating environment of micro data center and analyze sensing data through IoT(Internet of things) sensors in real time. Firstly we present configuration method of IoT sensing package and design method EMS hardware platform. Secondly we design data collector software for data collection of IoT sensor with different protocol and develop monitoring software of EMS. The data collector software consists of sensor collector module and collector manager module. Also we design EMS software which has micro service architecture structural style and component based business logic.

자율운항선박 선내 테이터 획득 및 모니터링

  • 이재한
    • Proceedings of the Korean Institute of Navigation and Port Research Conference
    • /
    • 한국항해항만학회 2022년도 춘계학술대회
    • /
    • pp.129-130
    • /
    • 2022
  • 선박 상태를 모니터링 함에 있어, 선내 내부망의 보안을 해치지 않는 상황에서 선내의 데이터를 획득하여 별도의 통신망으로 원격통신을 원활하게 하기 위한 데이터 습득 방법 연구하고, 데이터 지연시간을 분석한다.

  • PDF

A Method to Designing Managed Service for Efficient Service Monitoring (효율적인 서비스 모니터링을 위한 모니터링 가능한 서비스 설계 기법)

  • Lee, Hyun-Min;Kim, Soo-Dong
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 한국정보과학회 2010년도 한국컴퓨터종합학술대회논문집 Vol.37 No.1(A)
    • /
    • pp.84-89
    • /
    • 2010
  • 서비스 지향 컴퓨팅은 서비스를 동적으로 조합하여 사용자가 요구하는 비즈니스 프로세스를 개발하는 효율적인 개발 방법이다. 서비스는 분산환경에 배치되고 인터페이스만을 외부로 노출하여 내부의 세부사항은 숨긴다. 이러한 서비스의 특징은 서비스 사용자가 서비스의 품질을 알기 어렵게 만든다. 서비스 소비자가 중요한 도메인에서 서비스를 사용하려면 서비스 품질(QoS)이 보장되어야 한다. 서비스 품질을 보장하기 위해서는 서비스 품질 측정이 먼저 선행되어야 한다. 하지만 현재까지 서비스 품질 모델의 표준화가 이루어 지지 않아 모니터링 해야 할 명확한 대상이 정의되지 않았고, 그로 인해 서비스 모니터링 방법 및 모니터링 효율성에 대한 연구는 거의 이루어 지지 않았다. 이와 같은 문제를 해결하기 위하여, 본 논문에서는 먼저 서비스 모니터링 해야 할 데이터를 명확하게 정의한다. 또한 정의된 모니터링 데이터를 분류하고 분류된 데이터의 수집을 위한 모니터링 가능한 서비스 설계방법을 제안한다. 마지막으로, 실험을 통해 제안된 기법의 실효성과 효율성을 보여준다.

  • PDF

Study of Real-time Monitoring System Applicable to Heterogeneous Cloud Service Brokerage (이종 Cloud Service Brokerage에 적용 가능한 실시간 모니터링 시스템 연구)

  • Kim, Baul;Jo, Cheolyong;O, Donghwi;Kim, Myungjin
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 한국정보처리학회 2017년도 춘계학술발표대회
    • /
    • pp.637-640
    • /
    • 2017
  • 최근 클라우드 기술이 확산되면서 여러 기업이 자신만의 클라우드를 다양하게 제공하고 있으며 세계 각지에 흩어져 있는 다양한 클라우드 공급자들과 여러 프라이빗 클라우드를 연결하여 하나의 서비스를 제공하는 클라우드 서비스 브로커리지(Cloud Services Brokerage) 기술이 등장하게 되었다. 하지만 현재의 CSB 기술은 가상 자원 관리, 가상 머신 라이프 사이클 관리에 초점이 맞추어져 있으며 CSB에서 제공되는 모니터링 요소는 사용자의 복잡한 요구를 만족하기에는 부족한 실정이다. 또한 추가 모니터링 도구를 사용하는 경우도 CSB의 데이터와의 일관성을 만족하지 않는 문제가 있다. 따라서 본 논문에서는 이종 CSB와 연동이 가능한 실시간 모니터링 시스템을 제안한다. 본 논문에서 제안하는 모니터링 기술은 Scalr 및 CompatibleOne을 사용하여 주기적으로 메타데이터 동기화를 진행하며 데이터 일관성을 충족시키고 다양한 모니터링 데이터를 실시간으로 수집하여 사용자에게 제공한다.

Design and Construction of Data Monitoring System for Stable Cinder Reuse (안정적인 소각재 재활용을 위한 데이터 모니터링 시스템 설계 및 구축)

  • Kim, Gui-Jung;Han, Jung-Soo
    • Journal of the Korea Academia-Industrial cooperation Society
    • /
    • 제8권5호
    • /
    • pp.1082-1086
    • /
    • 2007
  • This research has a purpose of constructing the data monitoring system that makes two-tier work state in the brick production factory to unification by reusing cinder. Monitoring system automatically manages data by using data managing processes such as a state managing process, a location managing process, a badness managing process, a circumstances managing process. In this research, the data management monitoring system manufactures state information of each processes received from RFID and transmits them to data monitoring system. Analyzed data through this system reuses the cinder, so it can effectively manage the production process of the factory which produces bricks through processing automation, faulty-ratio minimization, real-time monitoring and loading managing.

  • PDF

A Study on Time-series Data Management Scheme for Dynamic Hadoop Application Monitoring Service (동적인 하둡 응용 모니터링 서비스를 위한 시계열 데이터 관리 방안에 관한 연구)

  • Kwak, Jae-Hyuck;Choi, Jieun;Kim, Sangwan;Byun, Eun-kyu
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 한국정보처리학회 2018년도 추계학술발표대회
    • /
    • pp.60-62
    • /
    • 2018
  • 본 논문에서는 리눅스에서 제공하는 성능 분석 도구들을 활용하여 사용자가 원하는 모니터링 매트릭을 동적으로 등록하고 모니터링 할 수 있는 확장 가능한 하둡 응용 모니터링 서비스의 시계열 데이터 관리 방안을 다룬다. 본 논문에서는 이를 위해서 시계열 데이터를 위한 관계형 데이터베이스인 TimeScaleDB를 사용하였으며 동적으로 변경가능한 모니터링 메트릭 데이터가 하이퍼테이블의 관리를 통해서 구조화된 밀집 데이터 형태로 효율적으로 관리될 수 있음을 제시하였다.

Research of Titanium Weld Monitoring Systems (티타늄 용접 모니터링 시스템 연구)

  • Ryu, Jin-Bo;Kim, Gwan-Hyung
    • Proceedings of the Korean Institute of Information and Commucation Sciences Conference
    • /
    • 한국정보통신학회 2016년도 추계학술대회
    • /
    • pp.674-675
    • /
    • 2016
  • 원자번호 22번에 해당하는 티타늄(titanium)은 매우 단단하며 가볍고, 부식에도 강한 금속이다. 티타늄은 비슷한 강도의 강철에 비해서 가볍고 알루미늄 합금에 비해 2배나 강력하다. 뿐만 아니라 티타늄은 바닷물에도 부식되지 않아 선박이다 해양플랜트 산업에서 많이 쓰이는 금속이기도 하다. 본 연구는 해양플랜트 건설 사업에 쓰이는 티타늄 용접에 대한 모니터링 시스템을 연구하는데 있다. 티타늄 용접공정에 사용되는 용접 파라메타는 용접 전압, 전류, 용접 토치의 위빙속도 및 와이어 공급 속도로 선정하였으며, 이러한 용접 파라메타를 계측할 수 있는 MCU 기반의 계측 보드를 설계하여 TCP/IP 통신을 기반으로 원격지로 용접 데이터를 전송하도록 하였으며, 이러한 데이터를 실시간으로 데이터를 그래프로 표현하도록 개발하였다. 이러한 용접 데이터에 대한 모니터링을 통하여 용접 시 발생하는 다양한 현상을 파악할 수 있도록 하였다. 본 연구를 통해서 티타늄 용접 시 발생하는 각종 데이터를 실시간으로 모니터링 할 수 있도록 개발하였으며, 데이터베이스에 저장된 기록을 통해서 용접 시 발생한 전체적인 용접 과정을 날짜와 시간별로 저장하여 용접과정에서 발생하는 전 과정을 관리할 수 있도록 하여 어떤 부분에서 잘못된 용접이 발생했는지 파악할 수 있음을 확인하였다.

  • PDF

Agent-Based RFID Model Design for Cinder Reuse (소각재 재활용을 위한 에이전트 기반 RFID 모델 설계)

  • Kim, Gui-Jug
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 한국정보처리학회 2007년도 춘계학술발표대회
    • /
    • pp.201-204
    • /
    • 2007
  • 본 논문은 소각재 재활용 모니터링 시스템 구현을 위한 에이전트 기반의 RFID 모델을 설계한다. RFID를 이용한 모니터링 시스템은 상태관리 에이전트, 위치관리 에이전트, 불량관리 에이전트, 상황관리 에이전트 등의 데이터 관리 에이전트를 이용해 데이터를 자동 관리하고, 대용량의 데이터를 처리하기 위해 대용량 데이터 처리 에이전트를 이용한다. 안정적인 소각재 재활용을 위한 에이전트 기반 데이터 모니터링 시스템의 개발은 산업체 전반에 걸쳐있는 기계화, 수작업화 된 공정을 실시간 자동화 공정으로 개발하는 획기적인 방법이 될 것이다.

  • PDF