클러스터 파일 시스템에서 인라인 데이터 중복제거 설계 및 구현

국문 초록 (Abstract)

클라우드 컴퓨팅 환경에서 가상 컴퓨팅 및 스토리지 자원에 대한 요구가 대규모로 증가하면서 스토리지 시스템에서는 스토리지 공간을 효율적으로 절감하고 활용할 수 있는 중복제거 기법을 적용하고 있다. 특히 가상 데스크탑 인프라 환경에서 가상 데스크탑 이미지들에 대해 동일한 데이터가 중복되어 저장되는 것을 방지함으로써 스토리지 공간을 절감하는데 큰 효과를 얻을 수 있다. 하지만 안정적인 가상데스크탑 서비스를 제공하기 위해서는 중복제거로 인한 가상 데스크탑의 성능 오버헤드와 주기적으로 발생하는 데이터 입출력 폭증, 그리고 빈번한 랜덤 입출력 동작과 같은 가상 데스크탑이 가지고 있는 특이한 워크로드를 효과적으로 처리할 수 있는 스토리지 시스템이 필요하다. 본 논문에서는 클라우드 컴퓨팅 환경에서 가상 데스크탑 및 스토리지 서비스를 지원하기 위해 개발된 클러스터 파일 시스템을 제시한다. 여기에서는 가상 데스크탑 이미지들에서 중복된 데이터가 스토리지에 저장되기 이전에 실시간으로 검출하고 제거하는 인라인 데이터 중복제거 기법을 통해 스토리지 공간을 절감한다. 또한 가상 데스크탑 이미지에 대한 중복제거 처리를 가상 호스트가 아니라 가상 데스크탑 이미지가 실제로 저장되는 데이터 서버에서 수행함으로써 중복제거 처리로 인한 가상 데스크탑의 성능 오버헤드를 줄인다.

다국어 초록 (Multilingual Abstract)

The growing demand of virtual computing and storage resources in the cloud computing environment has led to deduplication of storage system for effective reduction and utilization of storage space. In particular, large reduction in the storage space is made possible by preventing data with identical content as the virtual desktop images from being stored on the virtual desktop infrastructure. However, in order to provide reliable support of virtual desktop services, the storage system must address a variety of workloads by virtual desktop, such as performance overhead due to deduplication, periodic data I/O storms and frequent random I/O operations. In this paper, we designed and implemented a clustered file system to support virtual desktop and storage services in cloud computing environment. The proposed clustered file system provides low storage consumption by means of inline deduplication on virtual desktop images. In addition, it reduces performance overhead by deduplication process in the data server and not the virtual host on which virtual desktops are running.

목차 (Table of Contents)

• 요약
• Abstract
• 1. 서론
• 2. 클러스터 파일 시스템 구조
• 3. 인라인 데이터 중복제거
• 4. 실험 및 평가
• 5. 결론 및 향후 연구
• References

참고문헌 (Reference)

1 김재열, "가상 데스크톱 환경에서의 클라이언트 SSD 캐시를 이용한 분산 파일시스템의 성능 향상" 한국정보처리학회 3 (3): 433-442, 2014

2 "ZFS"

3 "Windows 7 IOPS for VDI: Deep Dive" Atlantis Computing Inc. 2016

4 "Virtual disk image"

5 "The qcow2 image format"

6 K. Jin, "The Effectiveness of Deduplication on Virtual Machine Disk Images" 2009

7 A. Gulati, "Storage Workload Characterization and Consolidation in Virtualized Environments" VPACT 2009

8 "SDFS"

9 "OpenSSL"

10 J. Wei, "Mad2: A Scalable High-Throughput Exact Deduplication Approach for Network Backup Services" 2010

11 김영창, "MAHA-FS : 고성능 메타데이터 처리 및 랜덤 입출력을 위한 분산 파일 시스템" 한국정보처리학회 2 (2): 91-96, 2013

12 C. Ng, "Live Deduplications Storage of Virtual Machine Images in an Open-Source Cloud" 2011

13 "LessFS"

14 "Iometer"

15 C. Dubnicki, "Hydrastor: A Scalable Secondary Storage" 2009

16 Y. Kim, "File-based Snapshot for Desktop Virtualization" 2014

17 "FUSE: Filesystem in Userspace"

18 "Data Deduplication"

19 "AES-NI"