• 제목/요약/키워드: BigData Platform

검색결과 506건 처리시간 0.03초

클라우드 컴퓨팅을 이용한 유시티 비디오 빅데이터 분석 (An Analysis of Big Video Data with Cloud Computing in Ubiquitous City)

  • 이학건;윤창호;박종원;이용우
    • 인터넷정보학회논문지
    • /
    • 제15권3호
    • /
    • pp.45-52
    • /
    • 2014
  • 유비쿼터스 시티(유시티)에서는 수많은 비디오 카메라들이 설치된다. 이렇게 설치된 많은 카메라로부터 대용량의 비디오 데이터가 실시간으로 끊임없이 발생하고 유시티의 관리 시스템으로 전달된다. 유시티의 다양한 서비스들을 뒷받침하기 위해서는 이러한 비디오 데이터를 저장하고, 이렇게 저장된 대용량의 비디오 데이터를 분석할 수 있는 방법과 관리 시스템이 요구된다. 그래서, 이 논문에서는 클라우드 컴퓨팅을 기반으로 한 유시티 비디오 관리 시스템을 제안한다. 또한, 근래 주목받고 있는 데이터 병렬처리 프레임워크인 Hadoop MapReduce를 이용하여 이러한 빅데이터 비디오를 분석하는 방법을 제안하고, 이에 따른 우리의 성능 평가를 소개한다.

Spark 기반에서 Python과 Scala API의 성능 비교 분석 (Performance Comparison of Python and Scala APIs in Spark Distributed Cluster Computing System)

  • 지경엽;권영미
    • 한국멀티미디어학회논문지
    • /
    • 제23권2호
    • /
    • pp.241-246
    • /
    • 2020
  • Hadoop is a framework to process large data sets in a distributed way across clusters of nodes. It has been a popular platform to process big data, but in recent years, other platforms became competitive ones depending on the characteristics of the application. Spark is one of distributed platforms to enable real-time data processing and improve overall processing performance over Hadoop by introducing in-memory processing instead of disk I/O. Whereas Hadoop is designed to work on Java and data analysis is processed using Java API, Spark provides a variety of APIs with Scala, Python, Java and R. In this paper, the goal is to find out whether the APIs of different programming languages af ect the performances in Spark. We chose two popular APIs: Python and Scala. Python is easy to learn and is used in AI domain in a wide range. Scala is a programming language with advantages of parallelism. Our experiment shows much faster processing with Scala API than Python API. For the performance issues on AI-based analysis, further study is needed.

[논문철회]무인비행기의 항행 데이터 분석을 통한 최적화된 프로파일 설계 및 구현 ([Retracted]Design and Implementation of Optimized Profile through analysis of Navigation Data Analysis of Unmanned Aerial Vehicle)

  • 이원진
    • 한국멀티미디어학회논문지
    • /
    • 제25권2호
    • /
    • pp.237-246
    • /
    • 2022
  • Among the technologies of the 4th industrial revolution, drones that have grown rapidly and are being used in various industries can be operated by the pilot directly or can be operated automatically through programming. In order to be controlled by a pilot or to operate automatically, it is essential to predict and analyze the optimal path for the drone to move without obstacles. In this paper, after securing and analyzing the pilot training dataset through the unmanned aerial vehicle piloting training platform designed through prior research, the profile of the dataset that should be preceded to search and derive the optimal route of the unmanned aerial vehicle was designed. The drone pilot training data includes the speed, movement distance, and angle of the drone, and the data set is visualized to unify the properties showing the same pattern into one and preprocess the properties showing the outliers. It is expected that the proposed big data-based profile can be used to predict and analyze the optimal movement path of an unmanned aerial vehicle.

빅데이터 융합 기반 NCS 홈페이지에 관한 탐색적 연구: 스플렁크 활용을 중심으로 (An Exploratory Study on the Big Data Convergence-based NCS Homepage : focusing on the Use of Splunk)

  • 박성택;이재덕;김태웅
    • 디지털융복합연구
    • /
    • 제16권7호
    • /
    • pp.107-116
    • /
    • 2018
  • NCS는 지식, 스킬, 태도 등과 같은 역량 구성요소들을 시스템함으로써 다양한 산업현장에서 다양한 레벨의 역량을 키우고 이에 부합하는 직무를 수행할 수 있도록 지원하는데 목적이 있다. NCS는 또한 교육훈련 프로그램 설계와 업무현장평가를 위한 스펙 개발을 위한 자료로 사용되기도 한다. 한국산업인력공단은 데이터를 기반으로 하는 NCS 관련 서비스 혁신을 위해 스플렁크라는 빅데이터분석시스템을 도입 운영 중이다. 스플렁크는 사용자가 손쉽게 폭넓은 데이터를 검색, 수집, 조직화 할 수 있는 플랫폼으로 기존의 노동집약적인 데이터베이스 운영체계와는 전혀 다른 서비스를 제공한다. 스플렁크의 데이터 시각화 및 분석기능을 활용하여 한국산업인력공단은 기존에는 불가능하였던 NCS 관련 서비스에 대한 새로운 관점과 운영적 인텔리젼스를 확보할 수 있게 되었다. 본 논문에서는 NCS 홈페이지를 분석하였다. 구체적으로는 스플렁크을 활용한 NCS 관련 서비스 및 축적 데이터에 대한 시각화 전략과 대시보드 설계 그리고 다양한 통계적 분석기능 및 구조에 대해 분석하고 이에 대한 소개를 하였으며, 이러한 사례 연구를 통한 실무적인 차원에서의 활용방안과 시사점을 제시하였다.

온라인 호텔 리뷰와 평점 불일치 문제 해결을 위한 딥러닝 기반 개인화 추천 서비스 연구 (A Study of Deep Learning-based Personalized Recommendation Service for Solving Online Hotel Review and Rating Mismatch Problem)

  • 이청용;최사박;신병규;김재경
    • 경영정보학연구
    • /
    • 제23권3호
    • /
    • pp.51-75
    • /
    • 2021
  • 세계적인 전자상거래 기업들은 지속 가능한 경쟁력을 확보하기 위해 사용자 맞춤형 추천 서비스를 제공하고 있다. 기존 관련 연구에서는 주로 평점, 구매 여부 등 정량적 선호도 정보를 사용하여 개인화 추천 서비스를 제공하였다. 하지만 이와 같은 정량적 선호도 정보를 사용하여 개인화 추천 서비스를 제공하면 추천 성능이 저하될 수 있다는 문제점이 제기되고 있다. 호텔을 이용한 사용자가 호텔 서비스, 청결 상태 등에 대하여 만족하지 못한다고 리뷰를 작성하였으나 선호도 평점 5점을 부여했을 때 정량적 선호도(평점)와 정성적 선호도(리뷰)가 불일치한 문제가 발생할 수 있다. 따라서 본 연구에서는 정량적 선호도 정보와 정성적 선호도 정보가 일치하는지를 확인하고 이를 바탕으로 선호도 정보가 일치하는 사용자를 바탕으로 새로운 프로파일을 구축하여 개인화 추천 서비스를 제공하고자 한다. 리뷰에서 정성적 선호도를 추출하기 위해 자연어 처리 관련 연구에서 널리 사용되고 있는 CNN, LSTM, CNN + LSTM 등 딥러닝 기법을 사용하여 감성분석 모델을 구축하였다. 이를 통해 사용자가 작성한 리뷰에서 정성적 선호도 정보를 정교하게 추출하여 정량적 선호도 정보와 비교하였다. 본 연구에서 제안한 추천 방법론의 성능을 평가하기 위해 세계 최대 여행 플랫폼 TripAdvisor에서 실제 호텔을 이용한 사용자 선호도 정보를 수집하여 사용하였다. 실험 결과 본 연구에서 제안한 추천 방법론이 기존의 정량적 선호도만을 고려하는 추천 방법론보다 우수한 추천 성능을 나타냄을 확인할 수 있었다.

스마트 환경재해 관리를 위한 서비스 플랫폼 설계 (Service Platform Design for Smart Environment Disaster Management)

  • 원달수
    • 문화기술의 융합
    • /
    • 제4권3호
    • /
    • pp.247-252
    • /
    • 2018
  • 환경의 문제는 전세계적으로 인류가 꼭 해결해야 할 문제로 급박하게 다가오고 있다. 특히 우리나라는 중국과의 지정학적인 위치로 인한 대기, 해양 오염의 직접적인 피해를 입고 있으며, 국내적으로도 공기, 물, 토양, 기상 등으로 인한 수많은 오염 가능성에 노출되어 있다. 이런 상황 속에서 국가 환경관련 관리 도메인/서비스(시스템) 간 연계성 단절로 인해 환경오염이나 재해 발생시 신속한 원인 규명 및 상황 대처 능력이 취약하고, 중복 투자 발생 등의 과제를 안고 있다. 스마트 환경재해 관리를 위한 서비스 플랫폼 개발은 국가 차원의 스마트 환경재해 관리 및 환경관련 계측 및 자동측정 데이터의 국가적인 표준 프로토콜 정의를 통하여 융복합적인 스마트 환경관리를 통해 환경재해를 조기에 감지하고, 신종 복합 환경재해를 예측할 수 있는 방안이 될 것이다.

LBS 서비스를 제공하는 전주를 이용한 전기차 충전 플랫폼의 설계 제안 (Design of Charging Platform for an Electric Vehicle using Electric Pole to support Location-Based Services)

  • 차병래;최근영;김남호;이성호;박선;신병춘;김종원
    • 스마트미디어저널
    • /
    • 제9권1호
    • /
    • pp.67-74
    • /
    • 2020
  • 최근 들어 전기차에 대한 수요 및 공급이 증가함에 따라, 전기차와 관련된 산업이 발전하고 있다. 특히, 전기차 충전 인프라에 대한 시장이 급격히 확대되고 있으며, 전기차 충전소 편의성에 대한 사용자 요구가 늘어나고 있다. 한전의 전주를 이용한 충전소는 전국 공용주차장 인근에 설치된 전주를 활용할 수 있기에 충전소 근처 가까이에 상업시설과 편의시설들이 많다. 그러한 상황에서, 전기차를 충전하는 동안 사용자는 쇼핑이나 각종 업무를 볼 수 있다. 본 논문에서는 전주를 이용한 충전소에서 사용자가 편리하게 쇼핑이나 업무를 볼 수 있도록 위치기반 서비스를 제공하는 전기차 충전 플랫폼의 설계를 제안하였다.

증강현실과 페어링을 이용한 SNS 플랫폼의 변화에 대한 연구 (A Study on Changing SNS Platform Using the Augmented Reality and Pairing)

  • 노창배;나원식
    • 디지털콘텐츠학회 논문지
    • /
    • 제15권5호
    • /
    • pp.587-594
    • /
    • 2014
  • 스마트폰의 보급과 SNS의 확산으로 우리는 과거와는 비교할 수 없을 정도로 많은 사람들과 관계를 맺고 유지하며 살아가고 있다. 관계 유지를 위해서는 지속적인 커뮤니케이션이 필수적인데, 이를 위해 사람들은 가장 효율적인 커뮤니케이션 방식을 찾을 수밖에 없다. 본 논문에서는 최근에 많은 주목을 받고 있는 증강현실과 MPEG-V를 이용해 차세대 실감 멀티미디어 시스템을 구성할 수 있도록 하였다. 그러면서 페어링 서비스와 연계하여 새로운 형태의 SNS 플랫폼 서비스를 제안하였다. SNS 서비스를 이용한 단순 채팅이 아닌 증강현실 서비스를 이용해 실세계 처럼 특정 공간의 마을을 만들고, 그 안에서 대화를 나누며 정보를 교환할 수도 있다. 이 시스템은 시각, 청각, 촉각 등의 오감에 대한 경험과도 연동하여 사람들이 원하는 형태의 다양한 서비스를 제공할 것이다.

블록체인 기반의 소프트웨어 유통 플랫폼의 활성화를 위한 SPDX 문서 생성 Visual Studio용 플러그인 개발 (SPDX Document Generation Visual Studio Plug-in development for Invigorating Blockchain based Software Distribution Platform)

  • 윤호영;조용준;신동명
    • 한국소프트웨어감정평가학회 논문지
    • /
    • 제13권2호
    • /
    • pp.9-17
    • /
    • 2017
  • 소프트웨어 개발 단계에 오픈소스 소프트웨어를 활용함으로써 발생할 수 있는 라이선스 위반 문제 등의 이유로 소프트웨어 컴플라이언스는 반드시 행해져야하는 작업 중 하나이다. 하지만 다수의 개발자가 참여한 규모있는 소프트웨어를 분석한다는 것은 많은 시간과 높은 난이도를 요구한다. 이와 같은 문제점을 개선할 수 있는 방안 중 하나인 SPDX 문서는 소프트웨어 패키지에 대한 메타데이터를 규격화한 문서이다. 해당 규격이 활성화된다면 소프트웨어 패키지의 정보 분석 작업이 간소화될 뿐만 아니라 오픈소스 소프트웨어의 건전한 유통에도 기여할 수 있을 것이다. 본 연구에서는 오픈소스 소프트웨어의 라이선스 정보를 포함하고 있는 SPDX 문서를 특정 중앙서버에 의존하지 않고 분산화 된 장부의 기록물로 공유하고, 사용자에게 목적과 자격 요건에 따라 SPDX 라이프사이클 서비스를 제공하는 블록체인 기반의 SPDX 유통 플랫폼을 개발하였다. 또한 블록체인 기반의 SPDX 유통 플랫폼의 활성화에 기여하는 것을 목적으로 통합개발환경용 SPDX 문서 생성 플러그인을 개발하였다.

직업준비를 위한 전략적 학습지원 교육플랫폼의 설계 (Design of educational platform for strategic job plannning)

  • 정명희;정명선
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2022년도 추계학술대회
    • /
    • pp.272-275
    • /
    • 2022
  • 현재 다양한 교육 컨텐츠를 제공하는 MOOCs-Massive Open Online Courses와 같은 대규모 온라인 플랫폼을 통해 시간과 장소에 구애받지 않고 언제 어디서나 자유롭게 접속해 학습할 수 있는 학습 환경이 갖추어졌다. 이를 기반으로 온라인 강의, 재택 학습의 비중이 더욱 커지고 있으며 교육적 성과를 위해 포트폴리오나 경험·체험 기반의 학습, 현장 활동, 팀 프로젝트 기반의 집단학습도 활발히 이루어지는 중이다. 현재 이수시간 혹은 학점 단위로 핵심기술에 집중된 나노(Nano) 혹은 마이크로디그리(microdegree)에 대한 관심도가 많이 증가하고 있는데 이러한 전략적 집중교육은 교육의 지속성과 효율성 측면에서 효과적인 학습을 가능하게 하기 때문으로 해석된다. 따라서 신기술에 의한 산업구조의 재편에 따른 직업·직무의 변화가 큰 시대에 스마트 모빌리티, 빅데이터, 인공지능과 같은 전문적인 신기술 분야의 집중교육은 취업에 훨씬 도움이 되고 있어 평생학습 방식의 대안으로 주목받고 있다. 이러한 배경 속에서 본 논문은 온라인 학습시대에 개인 맞춤형 마이크로디그리 방식의 목적 학습을 효율적, 효과적으로 지원할 수 있는 교육플랫폼 설계를 제안하고자 한다.

  • PDF