Proceedings of the Korea Information Processing Society Conference (한국정보처리학회:학술대회논문집)

  • 2022.11a
  • /
  • Pages.49-51
  • /
  • 2022
  • /
  • 2005-0011(pISSN)
  • /
  • 2671-7298(eISSN)
Korea Information Processing Society (한국정보처리학회)
권호 표지
DOI QR코드

DOI QR Code

A Study on Parallel I/O Technology in Filesystem for AI

AI를 위한 파일시스템 병렬 I/O 기술 연구

  • Yoon, Junweon (Dept. of Supercomputing Infrastructure Center, KISTI) ;
  • Hong, Taeyeong (Dept. of Supercomputing Infrastructure Center, KISTI)
  • 윤준원 (한국과학기술정보연구원) ;
  • 홍태영 (한국과학기술정보연구원)
  • Published : 2022.11.21
Download PDF
⟨ Previous Next ⟩

Abstract

대규모 데이터를 처리하기 위해 머신러닝, 딥러닝과 같은 AI 활용 연구가 일반화되면서 시스템 환경 또한 병렬처리 연산에 강화된 가속기 기반의 이기종 아키텍처로 확산되고 있다. CPU 기반의 계산 환경과 달리 상대적으로 성능이 낮은 수천 개의 산술연산장치(ALU)를 활용해 쓰레드 방식으로 연산을 수행하며, I/O의 특성 또한 대규모의 데이터들이 수많은 연산장치에 전달되기 위한 Small I/O, High-throughput 처리 성능이 애플리케이션에 큰 영향을 끼친다. 본 논문에서는 병렬 컴퓨팅 환경에 AI 애플리케이션이 접목되면서 요구되는 스토리지, 파일시스템의 환경을 분석하고 나아가 성능 검증을 통해 I/O 특성을 파악하고자 한다.

Keywords