DOI QR코드

DOI QR Code

In-Memory File System Backed by Cloud Storage Services as Permanent Storages

클라우드 스토리지를 최종 저장 장치로 사용하는 인메모리 파일 시스템

  • 이경준 (성균관대학교 전자전기컴퓨터공학과) ;
  • 김지원 (성균관대학교 소프트웨어플랫폼학과) ;
  • 류성태 (성균관대학교 IT융합학과) ;
  • 한환수 (성균관대학교 컴퓨터공학과)
  • Received : 2016.02.15
  • Accepted : 2016.04.26
  • Published : 2016.08.15

Abstract

As network technology advances, a larger number of devices are connected through the Internet. Recently, cloud storage services are gaining popularity, as they are convenient to access anytime and anywhere. Among cloud storage services, object storage is the representative one due to their characteristics of low cost, high availability, and high durability. One limitation of object storage services is that they can access data on the cloud only through the HTTP-based RESTful APIs. In our work, we resolve this limitation with the in-memory file system which provides a POSIX interface to the file system users and communicates with cloud object storages with RESTful APIs. In particular, our flush mechanism is compatible with existing file systems, as it is based on the swap mechanism of the Linux kernel. Our in-memory file system backed by cloud storage reduces the performance overheads and shows a better performance than S3QL by 57% in write operations. It also shows a comparable performance to tmpfs in read operations.

네트워크 기술의 발달에 따라 고속으로 인터넷에 연결 가능한 장치의 수가 증가하면서 언제 어디서나 쉽게 접근이 가능한 클라우드 스토리지의 사용량이 증가하고 있다. 대표적인 클라우드 스토리지의 형태 중 하나인 오브젝트 스토리지는 비용이 저렴하고 높은 가용성과 지속성을 보장해주지만, HTTP 기반 인터페이스인 RESTful API로만 데이터에 접근가능하다는 제약이 있다. 본 논문에서는 이러한 점을 해소하고자, 기존 POSIX 인터페이스를 지원하며 클라우드 오브젝트 스토리지와 데이터를 주고받을 수 있는 인메모리 파일 시스템을 제안한다. 특히 본 연구의 클라우드 스토리지로 파일을 보내는 플러시 기법은 리눅스 시스템의 스왑 모듈을 활용하여 개발함으로써 기존 애플리케이션들과 높은 호환성을 가지며, 기존 클라우드 스토리지를 사용하는 시스템이 가지는 오버헤드를 최소화하였다. 제안하는 파일 시스템은 S3QL 보다는 약 57% 빠른 쓰기 성능을 보이며, tmpfs와 매우 근접한 읽기 성능을 보인다.

Keywords

Acknowledgement

Grant : 스마트TV 2.0 소프트웨어 플랫폼

Supported by : 한국연구재단, 정보통신기술진흥센터

References

  1. Amazon S3 (Simple Storage Service), [Online]. Available: http://aws.amazon.com/s3/
  2. A. Bessani, R. Mendes, T. Oliveira, N. Neves, M. Correia, M. Pasin, and P. Verissimo, "SCFS: a shared cloud-backed file system," Proc. of the 2014 USENIX Annual Technical Conference, pp. 169-180, 2014.
  3. M. Vrable, S. Savage, and G. M. Voelker, "Bluesky: A cloud-backed file system for the enterprise," Proc. of the 10th USENIX conference on File and Storage Technologies, pp. 19-19, 2012.
  4. N. Rath. S3QL, [Online]. Available: https://bitbucket.org/nikratio/s3ql
  5. R. Rizun. S3fs, [Online]. Available: https://github.com/s3fs-fuse/s3fs-fuse
  6. P. Snyder, "tmpfs: A virtual memory file system," Proc. of the autumn 1990 EUUG Conference, pp. 241-248, 1990.
  7. A. Mathur, M. Cao, S. Bhattacharya, A. Dilger, A. Tomas, and L. Vivier, "The new ext4 filesystem: current status and future plans," Proc. of the Linux symposium, Vol. 2, pp. 21-33, 2007.
  8. Amazon EC2 (Elastic Compute Cloud), [Online]. Available: http://aws.amazon.com/ec2/
  9. Amazon EBS (Elastic Block Storage), [Online]. Available: http://aws.amazon.com/ebs/
  10. W. D. Norcott and D. Capps, Iozone filesystem benchmark, [Online]. Available: http://www.iozone.org
  11. R. McDougall and J. Mauro, Filebench: Application level file system benchmark, [Online]. Available: https://sourceforge.net/projects/filebench/