支持Hadoop大数据访问的pNFS框架研究与实现
文献类型：期刊论文
| 作者 | 何文婷2; 刘健2; 袁庆升1; 张军伟2; 董欢庆2; 刘振军2 |
| 刊名 | 计算机应用研究
 |
| 出版日期 | 2016 |
| 卷号 | 33.0期号:011页码:3340 |
| 关键词 | 分布式文件系统 大数据 缓存 布局 |
| ISSN号 | 1001-3695 |
| 英文摘要 | 随着大数据时代到来，分布式文件系统支持Hadoop大数据访问已成为一种趋势。以研究支持Hadoop大数据访问的pNFS框架为目的，采用在Hadoop与pNFS之间添加pNFSshimlayer模块的方法，实现了pNFS支持Hadoop大数据访问的HDFSAPIs；通过在pNFSshimlayer中添加写缓存和节点级数据布局感知机制优化了系统性能。采用Hadoop基准程序对提出的框架进行测试，结果显示写性能提升超过45％，读性能提升超过97％，证明此框架可以有效地支持Hadoop大数据访问。 |
| 语种 | 英语 |
| 源URL | [http://119.78.100.204/handle/2XEOYT63/26934]  |
| 专题 | 中国科学院计算技术研究所期刊论文_中文 |
| 作者单位 | 1.中国科学院信息工程研究所 2.中国科学院计算技术研究所 |
| 推荐引用方式 GB/T 7714 | 何文婷,刘健,袁庆升,等. 支持Hadoop大数据访问的pNFS框架研究与实现[J]. 计算机应用研究,2016,33.0(011):3340. |
| APA | 何文婷,刘健,袁庆升,张军伟,董欢庆,&刘振军.(2016).支持Hadoop大数据访问的pNFS框架研究与实现.计算机应用研究,33.0(011),3340. |
| MLA | 何文婷,et al."支持Hadoop大数据访问的pNFS框架研究与实现".计算机应用研究 33.0.011(2016):3340. |
入库方式： OAI收割
来源：计算技术研究所
浏览0
下载0
收藏0
其他版本
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。