• 제목/요약/키워드: Stream Processing System

검색결과 293건 처리시간 0.025초

An Abnormal Worker Movement Detection System Based on Data Stream Processing and Hierarchical Clustering

  • Duong, Dat Van Anh;Lan, Doi Thi;Yoon, Seokhoon
    • International Journal of Internet, Broadcasting and Communication
    • /
    • 제14권4호
    • /
    • pp.88-95
    • /
    • 2022
  • Detecting anomalies in human movement is an important task in industrial applications, such as monitoring industrial disasters or accidents and recognizing unauthorized factory intruders. In this paper, we propose an abnormal worker movement detection system based on data stream processing and hierarchical clustering. In the proposed system, Apache Spark is used for streaming the location data of people. A hierarchical clustering-based anomalous trajectory detection algorithm is designed for detecting anomalies in human movement. The algorithm is integrated into Apache Spark for detecting anomalies from location data. Specifically, the location information is streamed to Apache Spark using the message queuing telemetry transport protocol. Then, Apache Spark processes and stores location data in a data frame. When there is a request from a client, the processed data in the data frame is taken and put into the proposed algorithm for detecting anomalies. A real mobility trace of people is used to evaluate the proposed system. The obtained results show that the system has high performance and can be used for a wide range of industrial applications.

차량 내 멀티미디어 네트워크를 이용한 DSP 기반 실시간 영상 전송 시스템의 구현 (The Implementation of DSP-Based Real-Time Video Transmission System using In-Vehicle Multimedia Network)

  • 전영준;김진일
    • 융합신호처리학회논문지
    • /
    • 제14권1호
    • /
    • pp.62-69
    • /
    • 2013
  • 본 논문은 멀티미디어 광 네트워크인 MOST를 통해 차량의 카메라에서 입력된 영상을 실시간으로 전송하여 디스플레이 할 수 있는 MOST 기반 영상 송 수신 시스템을 제안하였다. 기존의 차량에서는 카메라를 아날로그 형태로 연결하여 영상을 전송하였으나, 차량에 장착되는 카메라의 수가 점점 증가함에 따라 네트워크로 연결하여 영상을 전송하는 것을 요구하게 되었다. 본 논문에서는 실시간 영상 전송을 위해 DSP를 이용하여 MPEG 인코딩과 디코딩을 하였다. 그리고 DSP와 MOST 네트워크 컨트롤러 사이의 스트림 데이터 전송은 MediaLB를 이용하였다. 이때 DSP가 MediaLB와의 연결을 지원하지 않기 때문에 스트림 데이터를 직접 주고 받을 수 없다. 따라서 FPGA를 사용하여 MediaLB를 통해 전송되는 스트림 데이터를 DSP에 전달하도록 하였다. MediaLB는 MOST 네트워크에 대한 하드웨어 및 소프트웨어 응용 프로그램 개발을 쉽게 할 수 있도록 해주고 모든 MOST 네트워크의 데이터 전송방법을 지원한다 본 논문에서 제안된 시스템으로 실시간 영상 전송을 테스트 한 결과 정상적으로 동작하는 것을 확인하였다.

소하천 경관정비 모의시스템에 관한 연구 (A Study on the Landscape Arrangement Simulation System for Small Streams)

  • 김선주;윤경섭;이광야;박성삼
    • 한국농공학회지
    • /
    • 제39권5호
    • /
    • pp.86-96
    • /
    • 1997
  • The arrangement of small streams in rural area, in the past times, attached importance to the prevention of flood damage through the straightening and lining of streams. Recently, the way of small stream arrangement is introducing the idea of water friendly environment or friendly space. As a result, there has been much concern with water favorable river management model which may lead to control flood. However, it is very difficult to develop a model applicable to all types of rivers, since each river has different flow velocity, flow amount and unique ecological characteristics. In this study, photo processing technique, one of landscape simulation methods, has been adopted because it helps to visually express and comprehensively evaluate pre and post scenery and easily applicable. Some important guideline and technique for the planning of small stream landscape arrangement are mentioned in this study. The simulation system for acquiring water favorable space and arranging landscapes needs to develop database which can forecast various types of landscape. It may also be used for the bases of planning and designing river environment arrangement. Computer aided image processing system enables to make selective planning in river environment arrangement. It may also enables to develop the methods for river environment development, ecology conservation, and multipurpose space utilization. Moreover, it makes economic river arrangement by applying river environment arrangement methods relevant to geographical characteristics. There are some limitations in this study, such as shortage of exact investigation on the stream direction and velocity in landscape arrangement. Continuous monitoring and research may be required to develop techniques through the application of computer graphics and digital image processing.

  • PDF

데이터 스트림 마이닝 기법을 적용한 개인/커뮤니티 맞춤형 Digital TV 시스템 (Customized Digital TV System for Individuals/Communities based on Data Stream Mining)

  • 신세정;이원석
    • 정보처리학회논문지D
    • /
    • 제17D권6호
    • /
    • pp.453-462
    • /
    • 2010
  • 국내외 TV방송의 디지털 전환 프로젝트가 본격적으로 진행되고 있다. 디지털 방송 서비스는 다매체, 다채널을 통한 방송 프로그램의 증가와 양방향 TV방송 서비스로 인해 사용자에게 다양한 방송 프로그램의 선택과 개인/커뮤니티별 맞춤형 시청 기회를 제공함으로써 새로운 방송서비스 환경을 필요로 한다. 본 논문에서는 TV-Anytime 영상 메타데이터에 대한 데이터 스트림 마이닝 기법을 이용하여 사용자의 시청 상황을 포함한 시청 패턴을 분석함으로써 개인/커뮤니티 시청 패턴 프로파일 및 시청 선호도 연관규칙 생성 기법을 적용한 개인/커뮤니티 맞춤형 Digital TV 시스템 을 제안한다. 또한, 임베디드 시스템 기반의 사용자 인터페이스를 구현하여 개인/커뮤니티 사용자들에게 적절한 추천 프로그램을 제공하고, 시청 프로그램 정보에 따른 시청 상황을 자동으로 제어하는 기능을 포함한다. 또한, 스마트폰 기반의 채널 추천 시스템을 구현하여 프로파일의 활용도를 증가시켰으며, 실험을 통하여 본 논문에서 제안하는 방법의 효율성을 검증한다.

하천경관을 고려한 환경친화적 수변공간 정비기법 연구 (A Study on the Environmentally Favorable Arrangement Technique of Water Space Considering Stream Landscape)

  • 김선주;박성삼;이광야;윤경섭
    • 한국농공학회지
    • /
    • 제40권6호
    • /
    • pp.57-69
    • /
    • 1998
  • The creation of favorable water space, in our living circumferential space, is very important factor to offer rural scenery to neighbor residents. We are to introduce stream landscape arrangement technique considering favorable water environment against conventional methods. In this study, the modeling district is Seungdu small stream of Ansung river system in Pyung-Teak city, Kyonggi province, and we carried out stream landscape simulation. The arranging plans of landscape are classified ti three types. The first one is conservation type of ecological environment that can express natural characteristics of stream inherence, raise variety of living things and construct coexisting environment between human beings and the other living things. The secong one is favorable water approach type. The basic object of this type is space construction for easy approach to waterside and increase of comfortable feelings of spectators. The third one is water utilization/flood control management type. In planning of environmentally favorable landscape arrangement, this type is the most important but is likely to be ignored. This type is an arranging plan of stream landscape considering safety. Also, we developed Streams Landscape Simulation System(SLSS). This program can be used for comparison of original landscape image with simulated one. To apply SLSS on the interested stream, landscape simulation that is based on hydraulic characteristics, runoff, flow direction, detailed conditions of basin and ecosystem of stream have to be executed. In this point, developing a stereographical technique of image processing and exact study of applying plan have to be executed continually.

  • PDF

HFC 망에서의 고속 멀티미디어 전송시스템 개발 (Development of High Speed Multimedia Transmission System based on HFC Network)

  • 손병희;남의석;양효식
    • 융합신호처리학회논문지
    • /
    • 제12권2호
    • /
    • pp.102-106
    • /
    • 2011
  • Hybrid Fiber Coax (HFC) network의 전송 능력은 xDSL과 비교하여 우수하지만, HFC network에서 아직도 케이블 모뎀을 사용하기 때문에 고화질의 영상을 전송할 때는 속도가 느려진다. 본 논문에서는 HFC망에서 사용하는 케이블 모뎀의 성능을 개선하기 위해서 개발된 하향 전용 IP-cable sender와 IP-cable modem을 제시하였다. 개발된 시스템은 HFC 망에서 30 Mbps 급의 IP 방송을 지원하고, 21 Mbps 속도의 고화질 트랜스포트 스트림을 사용하여 장시간 고화질 서비스를 제공한다.

Real-time multi-GPU-based 8KVR stitching and streaming on 5G MEC/Cloud environments

  • Lee, HeeKyung;Um, Gi-Mun;Lim, Seong Yong;Seo, Jeongil;Gwak, Moonsung
    • ETRI Journal
    • /
    • 제44권1호
    • /
    • pp.62-72
    • /
    • 2022
  • In this study, we propose a multi-GPU-based 8KVR stitching system that operates in real time on both local and cloud machine environments. The proposed system first obtains multiple 4 K video inputs, decodes them, and generates a stitched 8KVR video stream in real time. The generated 8KVR video stream can be downloaded and rendered omnidirectionally in player apps on smartphones, tablets, and head-mounted displays. To speed up processing, we adopt group-of-pictures-based distributed decoding/encoding and buffering with the NV12 format, along with multi-GPU-based parallel processing. Furthermore, we develop several algorithms such as equirectangular projection-based color correction, real-time CG overlay, and object motion-based seam estimation and correction, to improve the stitching quality. From experiments in both local and cloud machine environments, we confirm the feasibility of the proposed 8KVR stitching system with stitching speed of up to 83.7 fps for six-channel and 62.7 fps for eight-channel inputs. In addition, in an 8KVR live streaming test on the 5G MEC/cloud, the proposed system achieves stable performances with 8 K@30 fps in both indoor and outdoor environments, even during motion.

VOD 시스템에서 일괄전송을 위한 채널 스케줄링 기법 (Channel Scheduling Policies for Batching in VOD System)

  • 박호균;유황빈
    • 한국정보처리학회논문지
    • /
    • 제6권2호
    • /
    • pp.385-395
    • /
    • 1999
  • 주문형 비디오 시스템은 광대역 통신 네트워크를 통하여 사용자가 원하는 비디오를 융통성 있게 제공하는 저자 비디오 대여 시스템이다. 일괄전송 기법에 의하여 동일한 비디오 스트림을 서비스한다고 가정할 때, 하나의 비디오 스트림이 server-둥에서 이용 가능할 때마다 어떤 비디오가 어느 순간에 스케줄링 할 것 인지의 문제가 제기된다. 따라서, 각 스트림마다 변동하는 자원 대역폭을 처리하기 위해서 채널 할당 전략에 관한 것이 중요한 문제로 대두되었다. 본 논문에서는 규잉을 고려한 세 가지 스케줄링 정책 즉, 누적 대기 시간 기법(Cumulative Waiting Time), 평균 대기 시간(Mean Waiting Time) 기법, 그리고 예측 인기도 가중치(Predictable Popular Factor)에 의한 방법을 제안하였다. 누적 대기 시간 기법은 인기 있는 비디오에 대하여 우수한 반면, 평균 대기 시간 기법은 비인기 비디오에 대하여 우수하였다. 예측 인기도가중치에 의한 기법은 비디오에 대한 평균 대기 시간과 사용자의 요구 취소율에 대하여 다소 공평함을 알 수 있었다.

  • PDF

오픈소스 플랫폼 기반의 실시간 환자 대기시간 모니터링 시스템 설계 (A System Design for Real-Time Monitoring of Patient Waiting Time based on Open-Source Platform)

  • 류우석
    • 한국정보통신학회논문지
    • /
    • 제22권4호
    • /
    • pp.575-580
    • /
    • 2018
  • 본 논문에서는 병원에서 환자의 대기시간을 실시간으로 모니터링하기 위한 오픈소스 기반의 시스템을 제안한다. 환자의 위치 데이터를 실시간으로 분석, 처리하기 위한 고성능 스트림 처리 시스템을 비용 효율적으로 구축하기 위해서는 오픈소스 프로젝트를 활용하는 것이 필요하다. 빅데이터를 처리하기 위한 오픈 소스 시스템으로 다양한 하둡 서브프로젝트들로 구성된 하둡 에코시스템이 있다. 본 논문에서는 먼저 시스템 요구사항을 정의하고 하둡 에코시스템에서 이를 만족시키기 위한 몇 가지 오픈소스 프로젝트들을 선정한다. 그리고, 선정된 아파치 스파크, 아파치 카프카 등을 이용한 시스템 구조 설계 및 상세 모듈 설계를 제안한다. 제안된 시스템은 기존 시스템과의 연계 및 오픈소스 프로젝트를 통해 구축비용을 절감할 수 있으며, 또한 분산 스트림 처리를 통해 고성능과 안정성을 확보할 수 있다.

실시간 웹로그 스트림데이터를 이용한 고객행동평가시스템 구현 (Implementation of Customer Behavior Evaluation System Using Real-time Web Log Stream Data)

  • 이한주;박홍규;이원석
    • 한국정보기술학회논문지
    • /
    • 제16권12호
    • /
    • pp.1-11
    • /
    • 2018
  • 최근 온라인 쇼핑 유통시장의 규모는 지속적이고 빠르게 성장하고 있기 때문에 고객 행동평가분석을 통한 맞춤형 쇼핑서비스가 매우 중요해지고 있다. 하지만 기존의 분석 방식은 소비자의 프로파일 및 행동에 대한 분석 데이터만을 제공하고, 디스크기반 마이닝 탐사로 인해 실시간 분석의 한계가 존재했다. 그러므로 실시간 처리 및 분석이 필요한 웹 서비스와 같은 분야에 기존 방식을 적용하기에는 정확성의 문제와 시스템 성능 문제가 존재한다. 본 연구에서는 실시간으로 발생되는 웹 클릭 로그 스트림을 분석하고 특정 상품에 대한 집중도를 분석하여 상품 구매 의지가 있는 관심고객을 찾아내며, 이를 바탕으로 전체 고객 대상이 아닌 관심고객 중심의 상품 프로모션을 진행할 수 있는 시스템을 구현하고 이들의 효율성과 정확성을 검증한다.