• 제목/요약/키워드: 성능치

검색결과 2,316건 처리시간 0.029초

실시간 데이터 처리를 위한 아파치 스파크 기반 기계 학습 라이브러리 성능 비교 (A Performance Comparison of Machine Learning Library based on Apache Spark for Real-time Data Processing)

  • 송준석;김상영;송병후;김경태;윤희용
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2017년도 제55차 동계학술대회논문집 25권1호
    • /
    • pp.15-16
    • /
    • 2017
  • IoT 시대가 도래함에 따라 실시간으로 대규모 데이터가 발생하고 있으며 이를 효율적으로 처리하고 활용하기 위한 분산 처리 및 기계 학습에 대한 관심이 높아지고 있다. 아파치 스파크는 RDD 기반의 인 메모리 처리 방식을 지원하는 분산 처리 플랫폼으로 다양한 기계 학습 라이브러리와의 연동을 지원하여 최근 차세대 빅 데이터 분석 엔진으로 주목받고 있다. 본 논문에서는 아파치 스파크 기반 기계 학습 라이브러리 성능 비교를 통해 아파치 스파크와 연동 가능한 기계 학습라이브러리인 MLlib와 아파치 머하웃, SparkR의 데이터 처리 성능을 비교한다. 이를 위해, 대표적인 기계 학습 알고리즘인 나이브 베이즈 알고리즘을 사용했으며 학습 시간 및 예측 시간을 비교하여 아파치 스파크 기반에서 실시간 데이터 처리에 적합한 기계 학습 라이브러리를 확인한다.

  • PDF

멀티 프로세스와 멀티 쓰레드 기법의 효율적 활용을 위한 아파치 2.0웹 서버의 성능 분석 (Performance Analysis of Apache 2.0 Web Server for Efficient Utilization of Multi-Process and Multi-Thread Scheme)

  • 전흥석;이승원
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 가을 학술발표논문집 Vol.30 No.2 (1)
    • /
    • pp.316-318
    • /
    • 2003
  • 아파치 웹 서버는 사용자들에게 좀더 빠른 서비스를 제공하기 위해 멀티 프로세스 모델을 사용해 왔다. 그러나 최근 들어 웹 서비스를 사용하는 사람들이 급격히 증가함에 따라 멀티 프로세스 구조보다 더 빠르고 더 많은 요청을 처리할 수 있는 구조가 요구되어진다. 이러한 문제를 해결하기 위해서 생성 및 문맥전환 등에 있어서 오버헤드가 프로세스 보다 더 적다고 알려진 멀티 쓰레드 모델을 도입하게 된다. 하지만 멀티 쓰레드를 사용하는 것이 항상 멀티 프로세스를 사용한 것보다 더 좋은 성능을 보여주진 않는다. 본 논문에서는 멀티 프로세스와 멀티 쓰레드를 주어진 상황에 따라 어떻게 활용하는 것이 응답시간과 처리율 면에서 더 효율적인지를 알아보기 위하여 시뮬레이터를 제작하여 아파치 웹 서버의 성능을 측정한다. 실험을 통해 아파치 웹 서버의 다양한 지시자에 대한 설정 값에 따라 멀티 프로세스와 멀티 쓰레드 구조의 성능이 달라 질 수 있음을 확인하고 이의 결과를 제시한다.

  • PDF

무선 센서 네트워크에서 C-SCGP를 이용한 RSS/AOA 이상치 제거 기반 표적 위치추정 기법 (Outlier Reduction using C-SCGP for Target Localization based on RSS/AOA in Wireless Sensor Networks)

  • 강세영;이재훈;송종인;정원주
    • 융합정보논문지
    • /
    • 제11권11호
    • /
    • pp.31-37
    • /
    • 2021
  • 본 논문에서는 무선 센서 네트워크에서 이상치를 포함한 수신 신호 강도와 신호의 도달 각도 측정치 기반의 표적위치추정 성능 저하를 방지하기 위한 이상치 검출 알고리즘 C-SCGP를 제안한다. 센서 오작동, 재밍, 심한 잡음과 같은 다양한 이상치 원인으로 인해 표적 위치추정 정확도가 크게 떨어질 수 있어, 모든 이상치를 탐지하고 제거하는 것이 중요하다. 이러한 이상치를 제거하기 위해 single cluster graph partitioning (SCGP) 알고리즘이 널리 사용되고 있다. 기존의 SCGP 알고리즘은 hyperparameter 최적화를 통한 threshold 설정과 이상치 확률 계산이 필수적이므로 다양한 분야에 효율적인 적용이 제한되어왔다. 본 논문에서 제안된 continuous-SCGP (C-SCGP) 알고리즘은 이러한 SCGP의 약점을 극복한다. 다양한 잡음 환경에서 threshold 설정과 이상치 확률 계산이 필요 없는 제안된 C-SCGP 알고리즘과 threshold 설정과 이상치 확률 계산을 요구하는 SCGP 알고리즘의 이상치 제거 성능이 같음을 최종 추정된 표적의 RMSE 성능을 통하여 검증하였다.

LSTM 오토인코더를 활용한 축산 환경 시계열 데이터의 이상치 탐지: 경계값 설정에 따른 성능 비교 (Anomaly Detection in Livestock Environmental Time Series Data Using LSTM Autoencoders: A Comparison of Performance Based on Threshold Settings)

  • 정세연;김상철
    • 스마트미디어저널
    • /
    • 제13권4호
    • /
    • pp.48-56
    • /
    • 2024
  • 축산업에서 환경의 이상치 탐지와 데이터 예측은 매우 중요한 과제이다. 대부분 시계열 데이터로 수집되는 축산 환경 데이터의 이상치는 급격한 생육환경의 변화와 예상치 못한 전염병의 징후를 나타낼 수 있으므로 이상치를 빠르게 탐지하는 것이 중요하다. 이상치의 빠른 탐지와 효과적인 대응은 가축의 스트레스를 최소화하고 전염병 발생 환경을 조기에 발견하여 농가의 경제적인 손실을 감소시키는 역할을 할 수 있다. 본 연구에서는 축산환경 데이터의 이상치 탐지 분야에서 이상치를 규정하는 경계값(Threshold) 설정에서 두 가지 설정 방법을 이용하여 실험하고 성능을 비교하였다. Mean Squared Error(MSE)를 활용한 이상치 탐지 방법과 Dynamic Threshold를 이용한 이상치 탐지 방법을 이용하여 이를 통해 주어진 이전 데이터의 평균값과의 변동성을 분석하여 이상 상황을 식별하는 연구를 진행하였다. MSE를 활용한 이상치 탐지 방법은 94.98% 정확도를 보였고 표준편차를 활용한 Dynamic Threshold 방법은 99.66%정확도로 성능이 더 우수함을 확인할 수 있었다.

실시간 위성 시계 이상 감지 시스템 구축

  • 허윤정;임준후;조정호;허문범;남기욱
    • 한국우주과학회:학술대회논문집(한국우주과학회보)
    • /
    • 한국우주과학회 2011년도 한국우주과학회보 제20권1호
    • /
    • pp.22.4-22.4
    • /
    • 2011
  • 위성항법시스템에서 위성 신호의 이상 발생 시 신속하게 위성시계의 고장 유무를 판단할 수 있도록 실시간 위성 시계 이상감지 시스템을 구축하였다. 위성 시계는 시스템 성능에 직접적인 영향을 미치는 핵심 요소로서 고장이나 이상 발생 시 측정치에 매우 큰 영향을 미칠 수 있다. 특정 위성 시계에 고장이나 이상이 발생한 경우 사용자들이 해당 위성의 측정치를 사용하지 않도록 가능한 빨리 이를 감지하고 공지할 수 있어야 한다. 현재 GPS의 경우 시스템 자체만으로는 위성 상태 정보가 적절한 시간 내에 제공되지 못하므로, 사용자가 직접 위성 신호의 사용 유무를 판단할 수 있는 위성 상태 감시 기능이 필요하다. 이 논문에서는 위성 시계 이상 발생 시 이를 실시간으로 감지할 수 있도록 한국항공우주연구에서 구축한 실시간 위성 시계 이상 감지 시스템에 대해 소개하고자 한다. 시스템 구현을 위해 적용한 방법은 크게 세 단계로 나뉠 수 있다. 첫 번째, 실시간으로 수신한 GPS 이중 주파수 측정치로부터 반송파 스무딩 필터를 적용하여 위성 시계 바이어스를 추정한다. 두 번째, 위성 위치 및 시계 정보의 실시간 적용을 위해 항법력보다 성능이 뛰어난 IGS Ultra-rapid 예측 정보를 활용한다. 마지막으로 위성시계 바이어스 추정치와 예측치를 비교하여 시계 이상 유무를 판별한다. 실제 위성 시계 이상이 발생한 위성의 측정치를 적용하여 시스템에 대한 검증시험을 수행하였고, 10 나노 초 수준의 위성 시계도약 현상이 발생한 위성의 감지를 통해 시스템의 성능을 확인하였다. 이는 항공항법분야와 같이 고성능의 위치 정보를 요구하는 응용분야에 신뢰성 있는 위성 정보 제공을 위해 활용될 수 있다.

  • PDF

차량 환경에서 GPS 반송파 기반 위치 결정을 위한 반송파 불연속 측정치 검출에 대한 연구 (A Study on the Cycle-slip Detection for GPS Carrier-phase based Positioning of Land Vehicle)

  • 김연실;송준솔;윤호;기창돈
    • 한국항행학회논문지
    • /
    • 제17권6호
    • /
    • pp.593-599
    • /
    • 2013
  • 본 논문은 차량 환경에서 GPS 반송파 기반 위치 결정을 위한 반송파 불연속 측정치 검출에 대한 내용을 다룬다. 반송파 기반 위치 결정 방식에 있어서 위치 정확도의 신뢰도를 확보하기 위해서는 반송파 불연속 측정치를 검출해야 한다. 반송파 불연속 측정치를 검출하는 방식에는 여러 연구가 있지만 본 연구에서는 차분된 반송파 측정치와 저가의 관성센서를 이용해 추정한 차분된 반송파의 차이를 모니터링 값으로 설정함으로써 GPS 불연속 측정치를 검출한다. 저가의 불연속 측정치 검출 알고리즘을 개발하는 것을 목표로 설계된 불연속 측정치 검출 성능 만족을 위한 관성센서 성능 범위를 도출한다. 이를 통해 적절한 가격과 성능의 관성센서 선택이 가능하다. 선정된 관성센서가 설계치를 만족하는지를 검증하기 위하여 회전 테이블 실험을 진행하였다. 결과적으로 실험치가 설계된 불연속 측정치 검출 성능을 보수적으로 만족하는 검출 성능을 보였다.

3차원 인체 포즈 추적을 위한 가려짐에 강인한 관측치 모델 (An Occlusion Robust Observation Model for 3D Human Pose Tracking)

  • 조남규;이성환
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2011년도 한국컴퓨터종합학술대회논문집 Vol.38 No.1(C)
    • /
    • pp.390-392
    • /
    • 2011
  • 가려진 상태에 있는 인체 구성요소에 대한 관측치 모델은 영상에서 인체 구성요소가 차지하고 있는 화소들에 대한 정확한 평가를 해야 하는 저수준에서의 문제와, 권투 동작과 같이 역동적으로 변화하는 인체 구성요소 간의 가려짐 관계에 대한 문맥적인 상황을 같이 고려해야 하는 어려움을 갖고 있다. 본 논문에서는 자체 가려짐이 발생한 상황에서도 강인하게 인체 포즈 추적을 하기 위한 가려짐에 강인한 관측치 모델을 제안한다. 포즈 추적 성능을 비교평가 할 수 있는 HumanEva 데이터 셋을 이용하여 제안하는 관측치 모델의 강인함을 확인하였으며, 기존 방법과의 성능 비교에서도 우수한 추적 성능을 보였다.

차세대 지능망에서 IP 의 성능 조건 (Performance Requirements for Intelligent Peripheral in Advanced Intelligent Network)

  • 백장현;손창수
    • 산업공학
    • /
    • 제9권3호
    • /
    • pp.110-119
    • /
    • 1996
  • 차세대 지능망은 기존망으로부터 출발하여 끊임없이 진화하는 것으로 새로운 서비스이 도입이 용이한 서비스 독립적인 구조를 가진다. 이러한 차세대 지능망의 구성요소 중 기존 지능망과 차별화시켜 주는 구성요소인 IP(Intelligent Peripheral)에 대하여 IP의 성능을 평가하기 위한 성능 조건을 제시한다. IP의 성능을 구성하는 서비스 기준, 신뢰도 및 가용도, 시스템 트래픽 처리용량의 3가지 요소에 대하여 필요한 세부항목들을 제시하고 목표치를 설정한다. 이러한 항목 및 목표치들은 IP의 구조 및 운용환경 등이 확정되면 추후 수정보완도리 예정이다.

  • PDF

아파치 스쿱을 사용한 하둡의 데이터 적재 성능 영향 요인 분석 (Analysis of the Influence Factors of Data Loading Performance Using Apache Sqoop)

  • ;고정현;여정모
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제4권2호
    • /
    • pp.77-82
    • /
    • 2015
  • 빅데이터 기술은 데이터 처리 속도가 빠르다는 면에서 주목을 받고 있다. 그리고 관계형 데이터베이스(Relational Database: RDB)에 저장되어있는 대용량 정형 데이터를 더 빠르게 처리하기 위해서 빅데이터 기술을 활용하는 연구도 진행되고 있다. 다양한 분산 처리 도구들을 사용하여 분석 성능을 측정하는 연구는 많지만 분석하기 전 단계인 정형 데이터 적재의 성능에 관한 연구는 미미하다. 때문에 본 연구에서는 RDB 안에 저장되어있는 정형 데이터를 아파치 스쿱(Apache Sqoop)을 사용하여 분산 처리 플랫폼 하둡(Hadoop)으로 적재하는 성능을 측정하였다. 그리고 적재에 영향을 미치는 요인을 분석하기 위해 여러 가지 영향 요소를 변경해가면서 반복적으로 실험을 수행하였고 RDB 기반으로 구성된 서버 간의 적재 성능과 비교하였다. 실험 환경에서 아파치 스쿱의 적재 속도가 낮았지만 실제 운영하고 있는 대규모 하둡 클러스터 환경에서는 더 많은 하드웨어 자원이 확보되기 때문에 훨씬 더 좋은 성능을 기대할 수 있다. 이는 향후 진행할 적재 성능 개선 및 하둡 환경에서 정형 데이터를 분석하는 전체적인 단계의 성능을 향상시킬 수 있는 방법에 대한 연구의 기반이 될 것으로 예상한다.

3축형 인공자장발생장치의 제작과 성능에 관한 연구 (Performance and Manufacture of the Apparatus Generating Artificial Magnetic Field of 3-axis Type)

  • 이유원
    • 수산해양기술연구
    • /
    • 제39권3호
    • /
    • pp.181-188
    • /
    • 2003
  • 최근 널리 개발되고 있는 디지털형 지자기 감지형 컴퍼스의 전자장에서의 다양한 성능을 펑가하기 위한 3축형 인공자장발생장치를 실험적으로 제작하고, 그 성능 특성을 검토한 결과는 다음과 같다. 1. 3축형 인공자장발생장치의 X,Y,X 각축에 대한 자력의 변화는 전류의 증가에 따라 선형적으로 증가하였고, 측정치는 이론치와의 비교에서도 그 차의 평균 범위가 0.33~1.93$\uT$로 이론치와 거의 일치하여 제작된 인공자장발생장치의 성능은 양호한 것으로 판단된다. 2. 헬름홀츠 코일내의 가장자리에서는 다소 불규칙한 자력의 변화가 발생하였지만, 중심으로 갈수록 그 변동이 안정되는 경향을 나타내었다. 3. 자기 컴퍼스의 제진특성의 측정치와 이론치와의 비교에서 수평자력 0.30gauss 및 0.40gauss 에서는 성능이 양호한 것으로 판단되나, 수평자력 0.50gauss 에서는 다소 큰 차이가 나타내어 0.40gauss 이상의 비교적 높은 자력에서는 신뢰도가 낮은 것으로 판단되었다. 4. 0.30gauss 의 자장 속에서 측정된 수반각은 1rpm의 회전속도에서 1$\circ$로서 이 값은 국제성능 표준규격(6 $\circ$미만)에 적합하였다.