文献类型：期刊文章

作　　者：谢平[1,2]

机构地区：[1]青海师范大学计算机学院,西宁810008 [2]华中科技大学计算机科学与技术学院,武汉430074

出　　处：《计算机科学》

基　　金：国家973重点基础研究发展计划(2011CB302303)资助

年　　份：2014

卷　　号：41

期　　号：1

起止页码：22-30

语　　种：中文

收录情况：BDHX、BDHX2011、CSA、CSCD、CSCD2013_2014、IC、JST、RCCSE、UPD、ZGKJHX、核心刊

摘　　要：目前企业对数据量不断增长的需求使得数据中心面临严峻的挑战。研究发现,存储系统中高达60%的数据是冗余的,如何缩减存储系统中的冗余数据受到越来越多科研人员的关注。重复数据删除技术利用CPU计算资源,通过数据块指纹对比能够有效地减少数据存储空间,已成为工业界和学术界研究的热点。在分析和总结近10年重复数据删除技术文献后,首先通过分析卷级重删系统体系结构,阐述了重删系统的原理、实现机制和评价标准。然后结合数据规模行为对重删系统性能的影响,重点分析和总结了重删系统的各种性能改进技术。最后对各种应用场景的重删系统进行对比分析,给出了4个需要重点研究的方向,包括基于主存储环境的重删方案、基于分布式集群环境的重删方案、快速指纹查询优化技术以及智能数据检测技术。

关 键 词：重复数据删除 重删率  体系结构 元数据结构 I O优化  

分 类 号：TP311]