文献类型：期刊文章

作　　者：廖彬[1,2] 于炯[1,2] 张陶[2] 杨兴耀[2]

机构地区：[1]新疆大学软件学院,乌鲁木齐830008 [2]新疆大学信息科学与工程学院,乌鲁木齐830046

出　　处：《计算机学报》

基　　金：国家自然科学基金(60863003;61063042);新疆维吾尔自治区自然科学基金(2011211A011)资助~~

年　　份：2013

卷　　号：36

期　　号：5

起止页码：1047-1064

语　　种：中文

收录情况：BDHX、BDHX2011、CSA、CSA-PROQEUST、CSCD、CSCD2013_2014、EI(收录号：20132416422351)、INSPEC、JST、MR、SCOPUS、ZGKJHX、核心刊

摘　　要：与传统数据中心节能算法不同,MapReduce计算任务的数据依赖性使得设计HDFS(Hadoop Distributed File System)节能算法时必须保证集群中所有数据块的可用性,即任意数据块或其副本中的至少一块处于活动状态.根据HDFS集群结构与数据块存储等特点建立了DataNode节点矩阵、节点状态矩阵、文件分块矩阵、数据块存储矩阵与数据块状态矩阵,为后续研究建立了基础模型.结合数据块状态矩阵与数据块可用性之间的关系设计了DataNode节点休眠验证算法.概率分析了由于机架感知的存储策略带来数据块分布的随机性,使得在不改变数据块存储结构与存储策略的情况下并不能通过休眠DataNode节点达到节能的目的.进而设计了数据块存储结构配置节能算法与基于对称数据块存储策略下的节能算法,分别从改变数据块的存储结构与存储策略两方面对HDFS进行节能改进.实验结果表明:两种节能算法都能解决HDFS集群的能耗低利用率问题,并且集群负载越低节能效率越高.

关 键 词：云计算 分布式文件系统 节能计算 副本策略 绿色计算  

分 类 号：TP311]