Performance Enhancement and Evaluation of Distributed File System for Cloud

클라우드 분산 파일 시스템 성능 개선 및 평가

Abstract

The choice of a suitable distributed file system is required for loading large data and high-speed processing through subsequent applications in a cloud environment. In this paper, we propose a write performance improvement method based on GlusterFS and evaluate the performance of MapRFS, CephFS and GlusterFS among existing distributed file systems in cloud environment. The write performance improvement method proposed in this paper enhances the response time by changing the synchronization level used by the synchronous replication method from disk to memory. Experimental results show that the distributed file system to which the proposed method is applied is superior to other distributed file systems in the case of sequential write, random write and random read.

클라우드 환경에서 빅데이터 적재와 이후 애플리케이션을 통한 고속 처리를 위해서는 적합한 분산 파일 시스템의 선택이 요구된다. 본 논문에서는 GlusterFS 기반 쓰기 성능 향상 방법을 제안하고 클라우드 환경에서 기존 분산 파일 시스템 중 MapRFS, CephFS, GlusterFS와 성능을 비교 평가한다. 본 논문에서 제안한 쓰기 성능 향상 방법은 동기식 스토리지 복제 방식에서 사용하는 동기화 수준을 디스크에서 메모리로 변경함으로써 응답 시간을 향상 시킨다. 실험 결과는 본 논문의 제안 방법이 적용된 분산 파일 시스템이 순차 쓰기의 경우와 랜덤 쓰기와 랜덤 읽기가 혼합된 경우에서 다른 분산 파일 시스템 대비 성능이 우수함을 보인다.

Fig. 1. File Synchronization in eGlusterFS

Fig. 2. Sequential Write Throughput (MB/s) in a General SSD Test Environment

Fig. 3. Sequential Write Throughput (MB/s) in a NVMe SSD Test Environment

Fig. 4. Sequential Read Throughput (MB/s) in a General SSD Test Environment

Fig. 5. Sequential Read Throughput (MB/s) in a NVMe SSD Test Environment

Fig. 6. OLTP Throughput (Transactions/Sec) in a General SSD Test Environment

Fig. 7. OLTP Throughput (Transactions/Sec) in a NVMe SSD Test Environment

Table 1. Experimental Environments