• 제목/요약/키워드: Network load

검색결과 2,102건 처리시간 0.026초

빅데이터 수집 처리를 위한 분산 하둡 풀스택 플랫폼의 설계 (Design of Distributed Hadoop Full Stack Platform for Big Data Collection and Processing)

  • 이명호
    • 한국융합학회논문지
    • /
    • 제12권7호
    • /
    • pp.45-51
    • /
    • 2021
  • 급속한 비대면 환경과 모바일 우선 전략에 따라 해마다 많은 정형/비정형 데이터의 폭발적인 증가와 생성은 모든 분야에서 빅데이터를 활용한 새로운 의사 결정과 서비스를 요구하고 있다. 그러나 매년 급속히 증가하는 빅데이터를 활용하여 실무 환경에서 적용 가능한 표준 플랫폼으로 빅데이터를 수집하여 적재한 후, 정재한 빅데이터를 관계형 데이터베이스에 저장하고 처리하는 하둡 에코시스템 활용의 참조 사례들은 거의 없었다. 따라서 본 연구에서는 스프링 프레임워크 환경에서 3대의 가상 머신 서버를 통하여 하둡 2.0을 기반으로 쇼셜 네트워크 서비스에서 키워드로 검색한 비정형 데이터를 수집한 후, 수집된 비정형 데이터를 하둡 분산 파일 시스템과 HBase에 적재하고, 적재된 비정형 데이터를 기반으로 형태소 분석기를 이용하여 정형화된 빅데이터를 관계형 데이터베이스에 저장할 수 있게 설계하고 구현하였다. 향후에는 데이터 심화 분석을 위한 하이브나 머하웃을 이용하여 머신 러닝을 이용한 클러스터링과 분류 및 분석 작업 연구가 지속되어야 할 것이다.

그리드 컴퓨팅 네트워크에서 Seamless 가상 환경 시스템 구축을 위한 마이그레이션 에이전트 구현 및 성능 평가 (Implementation and Performance Evaluation of Migration Agent for Seamless Virtual Environment System in Grid Computing Network)

  • 원동현;안동언
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제7권11호
    • /
    • pp.269-274
    • /
    • 2018
  • MMORPG환경에서 이용자들은, 한정된 게임 월드보다 끊임없이 넓은 지형에서 플레이하기를 원하기 때문에 끊임없이 연속된 확장 가능한 공간을 제공해야 한다. 이때 사용자는 개개의 서버들로 구성된 게임 월드를 하나의 지역으로 인식하게 하고 분산 서버들이 구성한 게임 월드를 자유롭게 이동할 수 있어야 한다. 여러 대의 게임 서버를 분산 방식으로 구성하여 하나의 게임 월드를 제공하므로 개개 서버가 관리하는 영역을 벗어나 다른 서버의 관리지역으로 이동 시 이동에 따른 게임 캐릭터의 게임 관련 정보 등을 모두 전송해 주어야 한다. 서버 간의 정보 동기화를 위하여 복잡한 과정이 필요하고 이로 인한 응답 지연이 발생할 수 있다. 본 논문에서는 가상 환경을 구축하는 데 필요한 가상 환경 중 가상 환경 구축을 위한 마이그레이션 에이전트 서버를 제안한다. 마이그레이션 에이전트는 응답시간 단축을 위한 캐시 서버 역할을 수행하며, Player character수 70,000인 상황에서 응답시간을 50% 단축할 수 있었다.

Strength analysis of the driving shift gears for a 67 kW class agricultural tractor according to tire type

  • Baek, Seung Min;Kim, Wan Soo;Kim, Yeon Soo;Baek, Seung Yun;Lee, Nam Gyu;Moon, Seok Pyo;Jeon, Hyeon Ho;Choi, Young Soo;Kim, Taek Jin;Kim, Yong Joo
    • 농업과학연구
    • /
    • 제47권4호
    • /
    • pp.1147-1158
    • /
    • 2020
  • The purpose of this study was to measure the engine torque and rotational speed of a 67 kW class agricultural tractor according to tire type during plow tillage and to analyze the gear strength of the driving shift for the tractor. A field test was performed under the condition with a single tire (Test A) and dual tires (Test B) to increase the ground width of the rear tires. A load monitoring system was developed, and the engine torque and rotational speed were measured using controller area network (CAN) communication. The engine torque and rotational speed during plow tillage were calculated as the equivalent torque and speed using Palmgren Miner's rule. As a result, the equivalent torque and speed in Test A and Test B were 181.0 Nm and 1,913 rpm and 206.1 Nm and 2,130 rpm, respectively. As the ground width of the rear tire was increased, the bending stress in Test B was about 9.9 to 10.5% higher than that of the Test A, and the contact stress was about 4.6 to 4.9% higher than that of the Test A. Under all conditions, the safety factor for the bending and contact stress was 1 or more. Thus, the driving shift gears for the dual tire type are considered safe.

A study on the emissions of SOx and NH3 for a 78 kW class agricultural tractor according to agricultural operations

  • Baek, Seung Min;Kim, Wan Soo;Lee, Jun Ho;Kim, Yean Jung;Suh, Dae Seok;Chung, Sun Ok;Choi, Chang Hyun;Gam, Byoung Woo;Kim, Yong Joo
    • 농업과학연구
    • /
    • 제47권4호
    • /
    • pp.1135-1145
    • /
    • 2020
  • The purpose of this study was to compare and analyze the emissions of SOx and NH3 for a 78 kW class agricultural tractor during agricultural operations. A real-time monitoring system was constructed for measuring the load data. The field test was conducted during plow and rotary tillage. The working conditions were selected with the transmission gears in M3 Low and M2 High for the plow tillage and L3 High and L3 Low for the rotary tillage. The engine torque and fuel consumption were measured using controller area network (CAN) communication, and the emissions of SOx and NH3 were calculated based on the fuel consumption. As a result of the field tests, the engine torque was higher for the plow tillage than for the rotary tillage. As the gear stage was increased, the engine torque became higher. The emissions of SOx and NH3 were higher for the plow tillage than for the rotary tillage because the fuel consumption increased. Moreover, the emissions of SOx and NH3 tended to be more distributed for the rotary tillage than for the plow tillage. To develop an emission factor for agricultural machinery, it is important to measure reliable emission data during agricultural operations. In a future study, we will collect various emission data using a portable emission measurement system during agricultural operations.

Resource Allocation for Heterogeneous Service in Green Mobile Edge Networks Using Deep Reinforcement Learning

  • Sun, Si-yuan;Zheng, Ying;Zhou, Jun-hua;Weng, Jiu-xing;Wei, Yi-fei;Wang, Xiao-jun
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제15권7호
    • /
    • pp.2496-2512
    • /
    • 2021
  • The requirements for powerful computing capability, high capacity, low latency and low energy consumption of emerging services, pose severe challenges to the fifth-generation (5G) network. As a promising paradigm, mobile edge networks can provide services in proximity to users by deploying computing components and cache at the edge, which can effectively decrease service delay. However, the coexistence of heterogeneous services and the sharing of limited resources lead to the competition between various services for multiple resources. This paper considers two typical heterogeneous services: computing services and content delivery services, in order to properly configure resources, it is crucial to develop an effective offloading and caching strategies. Considering the high energy consumption of 5G base stations, this paper considers the hybrid energy supply model of traditional power grid and green energy. Therefore, it is necessary to design a reasonable association mechanism which can allocate more service load to base stations rich in green energy to improve the utilization of green energy. This paper formed the joint optimization problem of computing offloading, caching and resource allocation for heterogeneous services with the objective of minimizing the on-grid power consumption under the constraints of limited resources and QoS guarantee. Since the joint optimization problem is a mixed integer nonlinear programming problem that is impossible to solve, this paper uses deep reinforcement learning method to learn the optimal strategy through a lot of training. Extensive simulation experiments show that compared with other schemes, the proposed scheme can allocate resources to heterogeneous service according to the green energy distribution which can effectively reduce the traditional energy consumption.

화학적 수문곡선 분리기법을 이용한 낙동강 최상류 유역 기저유출량 산정 (Base Flow Estimation in Uppermost Nakdong River Watersheds Using Chemical Hydrological Curve Separation Technique)

  • 김령은;이옥정;최정현;원정은;김상단
    • 한국물환경학회지
    • /
    • 제36권6호
    • /
    • pp.489-499
    • /
    • 2020
  • Effective science-based management of the basin water resources requires an understanding of the characteristics of the streams, such as the baseflow discharge. In this study, the base flow was estimated in the two watersheds with the least artificial factors among the Nakdong River watersheds, as determined using the chemical hydrograph separation technique. The 16-year (2004-2019) discontinuous observed stream flow and electrical conductivity data in the Total Maximum Daily Load (TMDL) monitoring network were extended to continuous daily data using the TANK model and the 7-parameter log-linear model combined with the minimum variance unbiased estimator. The annual base flows at the upper Namgang Dam basin and the upper Nakdong River basin were both analyzed to be about 56% of the total annual flow. The monthly base flow ratio showed a high monthly deviation, as it was found to be higher than 0.9 in the dry season and about 0.46 in the rainy season. This is in line with the prevailing common sense notion that in winter, most of the stream flow is base flow, due to the characteristics of the dry season winter in Korea. It is expected that the chemical-based hydrological separation technique involving TANK and the 7-parameter log-linear models used in this study can help quantify the base flow required for systematic watershed water environment management.

다수 가전기기 유효전력의 스팩토그램 분석 및 LSTM기반의 전력 분해 알고리즘 (Spectogram analysis of active power of appliances and LSTM-based Energy Disaggregation)

  • 김임규;김현철;김승윤;신상용
    • 한국융합학회논문지
    • /
    • 제12권2호
    • /
    • pp.21-28
    • /
    • 2021
  • 본 연구에서는 가전기기 5종에 대해 실제 측정 전력 데이터를 이용하여 딥러닝 기반의 NILM 기법을 제안하고 그 효용성을 검증 하고자 한다. 약 3주간 중앙 전력 측정 장치 및 5종 가전기기(냉장고, 인덕션, TV, 세탁기, 공기청정기)의 유효전력을 개별 측정하였다. 실측 데이터의 전처리 방법을 소개하고 Spectogram 분석을 통해 가전 기기별 특징을 분석하였다. 가전기기별 특징을 학습 데이터셋으로 구성하였다. 중앙 전력 측정 기기와 가전기기 5종에서 측정된 모든 전력 데이터를 시계열 매핑하여 시계열 데이터 분석에 우수한 RNN 계열의 LSTM 신경망을 이용해 학습을 수행하였다. 메인 중앙 전력 측정 장치의 전력 데이터만으로도 5종 전력 신호를 분해해낼 수 있는 알고리즘을 제안하였다.

스마트 제조를 위한 베어링 결함 예지 정비 데이터셋 구축 (Building Bearing Fault Detection Dataset For Smart Manufacturing)

  • 김윤수;배서한;석종원
    • 전기전자학회논문지
    • /
    • 제26권3호
    • /
    • pp.488-493
    • /
    • 2022
  • 제조 현장에 사용되는 전기적 구동 모터는 베어링의 결함 발생 시 시스템 전체의 작동 정지를 초래하게 된다. 제조 환경 작동의 정지는 시간과 금전적으로 막대한 손해를 일으키며 이러한 베어링의 결함 원인으로는 회전 요소들의 지속적인 접촉으로 인한 마모, 과도한 하중 적용, 구동 환경 등 다양한 요소가 될 수 있다. 따라서 본 논문에서는 국내 제조 환경과 유사한 모터 구동 환경을 제작하여, 다양한 원인의 베어링 환경을 모의한다. 또한 구축된 환경을 바탕으로 정상 및 결함 상태에 따라 달라지는 진동 특성의 변화를 센서를 통해 수집하여 베어링 결함 예지 정비를 위한 데이터셋을 제안한다. 진동 특성 수집에 사용된 센서는 Microphone G.R.A.S. 40PH-10을 사용하여 수집하였으며, 다양한 기계학습 모델을 사용하여 제안하는 데이터셋에 훈련된 견본 베어링 예지 정비 시스템을 제작해본 결과, 심층 신경망 모델 기준 시간 영역 92.3%, 주파수 영역 98.3%의 높은 정확도 성능을 보여준다.

유니버설미들웨어기반의 IoT 적재폐기물 화재예방 동적 상황인지 플랫폼 구축 (Implementation of Dynamic Context-Awareness Platform for Internet of Things(IoT) Loading Waste Fire-Prevention based on Universal Middleware)

  • 이해준;황치곤;윤창표
    • 한국정보통신학회논문지
    • /
    • 제26권8호
    • /
    • pp.1231-1237
    • /
    • 2022
  • 적재 폐기물의 적재 높이와 압력, 대표적 구성폐기물인 목재, 건전지, 플라스틱 폐기물의 건조, 표면의 탄화변화를 동적으로 인지해야 한다. 동적 상황인지 서비스는 유니버설미들웨어 기반 BCN 융합 통신 서비스인 Ambient SDK 모델을 기반으로 플랫폼을 구성하였다. 또한, 적재 폐기물에서 자연발화의 발효열 발화 분석 자료를 기반으로 화재 발생 원인을 규명하는 상황인지 시스템을 구성하였다. 유니버설미들웨어를 활용하여 화재 조기경보 유형별 시나리오 구성에 적용할 수 있는 실시간 동적 서비스 플랫폼을 구축하였다. 그리하여, 저온발화 화재 가능성 데이터 분석을 위한 IoT 상황인지 플랫폼을 동적으로 구성하여 제시하였다.

엣지컴퓨팅을 활용한 분산처리 시스템의 가용성 향상에 관한 연구 (A Study on the Improvement of Availability of Distributed Processing Systems Using Edge Computing)

  • 이건우;김영곤
    • 한국인터넷방송통신학회논문지
    • /
    • 제22권1호
    • /
    • pp.83-88
    • /
    • 2022
  • 최근 정보통신기술의 발전에 따라 사물인터넷(이하 IoT) 관련 기술이 지속적으로 발전하고 있다. IoT 시스템은 다양한 센서들을 바탕으로 센서마다 고유한 데이터를 네트워크를 통해 주고 받는다. IoT 시스템에서 발생하는 데이터는 실시간으로 발생한다는 특징과, 그 양이 설치된 센서의 양과 비례한다는 점에서 연속적으로 수집되는 데이터들은 빅 데이터로 정의할 수 있다. 현재까지의 IoT 시스템은 중앙 집중 처리 방식을 통한 데이터 저장, 처리 및 연산을 적용하였다. 하지만, 구축 규모가 커지고 다량의 센서를 사용하는 경우 기존의 중앙 집중 처리 방식의 서버는 병목 현상으로 인한 부하가 발생할 수 있다. 따라서, 본 논문에서는 IoT 환경에서 발생하는 실시간 센서 데이터를 효율적으로 처리하기 위하여 시스템의 고가용성을 목적으로 하는 데이터의 중요도 기반 알고리즘을 적용하기 위한 분산 처리 시스템에 대해 제안하였다.