Institute of Computing Technology, Chinese Academy IR
基于分级编码的高可靠存储策略 | |
冯清青1; 孟丹2; 韩冀中2 | |
2013 | |
发表期刊 | 高技术通讯 |
ISSN | 1002-0470 |
卷号 | 23.0期号:011页码:1103 |
摘要 | 研究了适应当前大数据时代的数据可靠性存储,针对已有存储策略难以同时满足高可靠性存储和高空间利用的需求的问题,提出了一种面向大数据的高可靠低冗余分级编码存储策略。该策略考虑到数据因类型不同、生命周期不同而重要程度有别的特性,可为不同类型数据分别设定容错级别;将不同冗余度的容错编码方式在-套统-存储架构中实现,用一组简单参数设置为数据选择恰当的容错级别编码存储;通过动态降低历史数据的冗余度进一步减少存储空间开销。实验验证了其有效性。对重要小文件采用高容错级别的编码分片存储,能在系统95%存储节点失效的情况下,根据编码后的部分数据分片快速修复所有数据;对普通文件采用适当放松的容错编码级别,在保证数据快速、无损修复的前提下比传统3副本策略节省1.5倍的存储空间。 |
关键词 | 大数据 存储 可靠性 容错 低冗余 分级 编码 |
语种 | 英语 |
文献类型 | 期刊论文 |
条目标识符 | http://119.78.100.204/handle/2XEOYT63/35748 |
专题 | 中国科学院计算技术研究所期刊论文_中文 |
作者单位 | 1.中国科学院计算技术研究所 2.中国科学院信息工程研究所 |
第一作者单位 | 中国科学院计算技术研究所 |
推荐引用方式 GB/T 7714 | 冯清青,孟丹,韩冀中. 基于分级编码的高可靠存储策略[J]. 高技术通讯,2013,23.0(011):1103. |
APA | 冯清青,孟丹,&韩冀中.(2013).基于分级编码的高可靠存储策略.高技术通讯,23.0(011),1103. |
MLA | 冯清青,et al."基于分级编码的高可靠存储策略".高技术通讯 23.0.011(2013):1103. |
条目包含的文件 | 条目无相关文件。 |
个性服务 |
推荐该条目 |
保存到收藏夹 |
查看访问统计 |
导出为Endnote文件 |
谷歌学术 |
谷歌学术中相似的文章 |
[冯清青]的文章 |
[孟丹]的文章 |
[韩冀中]的文章 |
百度学术 |
百度学术中相似的文章 |
[冯清青]的文章 |
[孟丹]的文章 |
[韩冀中]的文章 |
必应学术 |
必应学术中相似的文章 |
[冯清青]的文章 |
[孟丹]的文章 |
[韩冀中]的文章 |
相关权益政策 |
暂无数据 |
收藏/分享 |
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论