DOI QR코드

DOI QR Code

A Study for Big Data Analytics Platform with Raspberry Pi Cluster and Apache Spark

라즈베리 파이 클러스터와 아파치 스파크를 활용한 빅데이터 분석 플랫폼 연구

  • Kim, Young-Sun (Dept. of Computer Science & Engineering, Ewha Womans University) ;
  • Park, Ji-Young (Dept. of Computer Science & Engineering, Ewha Womans University) ;
  • Yoon, Bo-Ram (Dept. of Computer Science & Engineering, Ewha Womans University) ;
  • Lee, Jung-Hyun (Lineplay Company) ;
  • Yong, Hwan-Seung (Dept. of Computer Science & Engineering, Ewha Womans University)
  • 김영선 (이화여자대학교 컴퓨터공학과) ;
  • 박지영 (이화여자대학교 컴퓨터공학과) ;
  • 윤보람 (이화여자대학교 컴퓨터공학과) ;
  • 이정현 ((주)Lineplay) ;
  • 용환승 (이화여자대학교 컴퓨터공학과)
  • Published : 2015.10.28

Abstract

최근 관심이 증대되고 있는 빅데이터 분석 및 처리를 위한 병렬분산처리 시스템은 대용량 서버가 필요하고 인프라 구축을 위해 고비용을 지불해야 한다. 이를 해결하기 위해 본 연구에서는 저렴한 라즈베리 파이로 클러스터를 구성하고, 하둡보다 빠른 속도의 처리를 제공하는 아파치 스파크를 분석 솔루션으로 하는 빅데이터 분석 플랫폼을 구축하였다. 구축한 플랫폼이 빅데이터 활용을 위해 적절한 성능을 보이는지 확인하기 위해 텍스트 마이닝을 수행하였고, 분석 결과 유효한 성능을 보였다. 적절한 비용으로 빅데이터 분석이 가능해지면서 중소기업과 개인, 교육 기관에서도 빅데이터 활용이 가능해지면서 활용 분야가 크게 확대될 것으로 보인다.

Keywords