Institute of Computing Technology, Chinese Academy IR
支持Hadoop大数据访问的pNFS框架研究与实现 | |
何文婷1; 刘健1; 袁庆升2; 张军伟1; 董欢庆1; 刘振军1 | |
2016 | |
发表期刊 | 计算机应用研究 |
ISSN | 1001-3695 |
卷号 | 33.0期号:011页码:3340 |
摘要 | 随着大数据时代到来,分布式文件系统支持Hadoop大数据访问已成为一种趋势。以研究支持Hadoop大数据访问的pNFS框架为目的,采用在Hadoop与pNFS之间添加pNFSshimlayer模块的方法,实现了pNFS支持Hadoop大数据访问的HDFSAPIs;通过在pNFSshimlayer中添加写缓存和节点级数据布局感知机制优化了系统性能。采用Hadoop基准程序对提出的框架进行测试,结果显示写性能提升超过45%,读性能提升超过97%,证明此框架可以有效地支持Hadoop大数据访问。 |
关键词 | 分布式文件系统 大数据 缓存 布局 |
语种 | 英语 |
文献类型 | 期刊论文 |
条目标识符 | http://119.78.100.204/handle/2XEOYT63/26935 |
专题 | 中国科学院计算技术研究所期刊论文_中文 |
作者单位 | 1.中国科学院计算技术研究所 2.中国科学院信息工程研究所 |
第一作者单位 | 中国科学院计算技术研究所 |
推荐引用方式 GB/T 7714 | 何文婷,刘健,袁庆升,等. 支持Hadoop大数据访问的pNFS框架研究与实现[J]. 计算机应用研究,2016,33.0(011):3340. |
APA | 何文婷,刘健,袁庆升,张军伟,董欢庆,&刘振军.(2016).支持Hadoop大数据访问的pNFS框架研究与实现.计算机应用研究,33.0(011),3340. |
MLA | 何文婷,et al."支持Hadoop大数据访问的pNFS框架研究与实现".计算机应用研究 33.0.011(2016):3340. |
条目包含的文件 | 条目无相关文件。 |
个性服务 |
推荐该条目 |
保存到收藏夹 |
查看访问统计 |
导出为Endnote文件 |
谷歌学术 |
谷歌学术中相似的文章 |
[何文婷]的文章 |
[刘健]的文章 |
[袁庆升]的文章 |
百度学术 |
百度学术中相似的文章 |
[何文婷]的文章 |
[刘健]的文章 |
[袁庆升]的文章 |
必应学术 |
必应学术中相似的文章 |
[何文婷]的文章 |
[刘健]的文章 |
[袁庆升]的文章 |
相关权益政策 |
暂无数据 |
收藏/分享 |
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论