HLBS云存储系统中多文件系统的设计与实现-WeiweiJia.PDF

HLBS云存储系统中多文件系统的设计与实现 1 1 1 2 贾威威 ， 林奕 ， 张延园 ， 陈莉君 （1西北工业大学计算机学院， 陕西 西安 710072） （2西安邮电大学计算机学院， 陕西 西安 710121） harryxiyou@ （ ） ThedevelopmentofMultiplefileextensionforHLB 1 1 1 2 JiaWeiwei ,LinYi ,ZhangYanyuan ,ChenLijun （1SchoolofComputerScience,NorthwesternPolytechnicalUniversity,XiAn710072,China） （2SchoolofComputerScience,XiAnUniversityofPostsandTelecommunications,XiAn710121,China） Abstract Based on Hadoop distributed File System, HLB (Hadoop Distributed File System Based Log-Structured Block StorageSystem)isrealizedwiththemechanismofLog-StructuredFile Systemwhichisaback-end storagesystem.Inorderto letHLB supportdirectorytree structure,cloudstoragesystemisanalyzedandmultiple fileextensionsystemHLB (Hadoop Distributed File SystemLog-Structured File System) is designed and realized, which is based on HLBS(Hadoop Distributed FileSystemBasedLog-StructuredBlockStorageSystem).Withmultiplefileextensionsystem,HLB cansupportmultiplefile managementandrealizefromblock-levelfilesystemtofile-levelfilesystem.ThisfeaturecanletHLB getmorestoragespace, supportmultiplefilereadandwriterandomly,supportdirectorytreestructureandsoon.InordertoletHLB supportmultiple file extension system, file systemandHLB file system’sdesignandimplementationincloud storagefieldis analyzed.With otherfilesystemforcloudstorage,HLB ’sperformanceisweighedandanalyzed. Keywordsstoragesystem;filesystem;multiplefileextension;logstructure; 摘 要 HLB （HadoopDistributedFileSystemBasedLog-StructuredBlockStorageSystem）是基于日志结构文件系统理念， 在Hadoop分布式文件系统框架之上开发的后台存储系统。为了让HLB 支持树形目录结构，在逐步分析云存储系统的 基础上，设计并实现了基 HLB 的多文件扩展系统。通过在HLB 之上添加多文件扩展系统，HLB 就可以支持多 文件管理，从而实现从块级别存储系统到文件级别文件系统的跳跃，可以使HLB 获得更大的磁盘空间，支持多文件 随机读写特性，支持目录结构等特性。为了使HLB 支持多文件扩展功能，详细分析了文件系统的设计与实现，HLB 文件系统在云存储中的设计与实现，并结合其他云存储文件系统，分析了HLB 的实现性能。 关键词 存储系统；文件系统；多文件扩展；日志结构； 中图分类号 TP391.9 云计算是分布式处理（DistributedComputing）、 之上实现了用户态后台存储系统。通过在HL