一种支持EB级存储的可扩展存储空间管理方法
文献类型:期刊论文
作者 | 邢晶; 熊劲![]() ![]() ![]() |
刊名 | 计算机研究与发展
![]() |
出版日期 | 2013 |
卷号 | 50.0期号:008页码:1573 |
关键词 | 机群文件系统 海量存储 数据放置 数据定位 多复本 存储空间管理 |
ISSN号 | 1000-1239 |
英文摘要 | 随着海量数据应用的增多,机群文件系统需要具备对PB甚至EB级存储空间进行管理的能力.受数据位置信息维护方法的限制,在面对需要管理的百亿甚至万亿个对象时,对象存储服务器在数据定位、负载均衡和复本维护方面均存在可扩展处理的问题.为了满足日益增长的存储需求,提出了一种可扩展的存储空间管理方法.首先,该方法将存储空间中的对象位置信息通过Extendible Hashing以两级索引结构的方式进行组织,以此来支持对海量对象位置信息的扩展性管理;其次,该方法依靠对象位置信息在多服务器的分布结果来放置对象,文件系统能通过对索引结构的调整以较低开销实现负载均衡;最后,该方法以数据位置信息组织的索引结构为粒度进行复本维护以降低复本位置信息的维护开销.实验评测表明,存储空间管理方法能够支持海量数据的高效管理.在负载均衡方法的作用下,多存储服务器的I/O聚合带宽因负载均衡而能够取得10%的提升.相比Lustre和DCFS3,该系统在多客户端并发访问环境下具有更好的扩展性能. |
语种 | 英语 |
源URL | [http://119.78.100.204/handle/2XEOYT63/36197] ![]() |
专题 | 中国科学院计算技术研究所期刊论文_中文 |
作者单位 | 中国科学院计算技术研究所 |
推荐引用方式 GB/T 7714 | 邢晶,熊劲,孙凝晖,等. 一种支持EB级存储的可扩展存储空间管理方法[J]. 计算机研究与发展,2013,50.0(008):1573. |
APA | 邢晶,熊劲,孙凝晖,&马捷.(2013).一种支持EB级存储的可扩展存储空间管理方法.计算机研究与发展,50.0(008),1573. |
MLA | 邢晶,et al."一种支持EB级存储的可扩展存储空间管理方法".计算机研究与发展 50.0.008(2013):1573. |
入库方式: OAI收割
来源:计算技术研究所
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。