DOI QR코드

DOI QR Code

KI Cloud: Design and Implementation of BigData Analysis and Machine Learning Applications on Supercomputer

KI Cloud: 슈퍼컴퓨터를 통한 빅데이터 분석 및 머신 러닝 서비스 구축 방안

  • Park, Ju-Won (Korea Institute of Science and Technology Information) ;
  • Lee, Seungmin (Korea Institute of Science and Technology Information) ;
  • Jeong, Kimoon (Korea Institute of Science and Technology Information) ;
  • Hong, TaeYoung (Korea Institute of Science and Technology Information)
  • 박주원 (한국과학기술정보연구원) ;
  • 이승민 (한국과학기술정보연구원) ;
  • 정기문 (한국과학기술정보연구원) ;
  • 홍태영 (한국과학기술정보연구원)
  • Published : 2020.11.05

Abstract

전통적으로 기초 과학 분야의 대규모 워크로드 작업들은 슈퍼컴퓨터와 같은 대용량 클러스터 시스템을 이용하여 수행해왔다. 그러나 최근 빅데이터 및 머신 러닝과 같은 새로운 분야에서의 컴퓨팅 자원 요구가 증가하고 기존 사용자의 요구 사항도 다양해짐에 따라 기존의 클러스터 시스템 운영 환경에서는 많은 어려움이 나타나고 있다. 이러한 문제를 해결하기 위해 한국과학기술정보연구원(KISTI)에서는 지난 3 월부터 KI (KISTI Intelligent) Cloud 서비스를 개발하여 서비스를 제공하고 있다. KI Cloud 서비스는 다음과 같은 특징이 있다. 첫째, Jupyter 과 RStudio 와 같은 대화형 개발 환경을 웹을 통해 제공함으로써 사용자는 언제, 어디서나 손쉽게 서비스를 활용할 수 있다. 둘째, 컨테이너 기술을 활용하여 사용자가 요구하는 개발 및 실행 환경을 실시간으로 구성하여 제공한다. 셋째, 사용자의 서비스 환경을 동적으로 구성하여 제공함으로써 컴퓨팅 자원의 효율성을 높일 수 있다.

Keywords