Seadown一种异构MapReduce集群中面向SLA的能耗管理方法.pdf

第36卷第5期 计 算 机 学 报 v01．36No．5 2013 2013年5月 CHINESE OFCOMPUTERS May JOURNAL 面向SLA的能耗管理方法 林 彬 李姗姗 廖湘科 孟令丙 刘晓东 黄 酥 (国防科学技术大学计算机学院长沙410073) 摘要数据中心的能耗管理已经成为大规模数据处理中的热点问题，其主要目标是控制相关成本的急剧增长． 大量的工作围绕着在集群利用率较低时，关闭部分服务器来降低能耗，但是这些方法都严重受限于数据存储策略， 同时难以保证应用的实时性能．MapReduce集群作为目前流行的大规模数据处理平台，能耗问题尤为突出．文中针 允许关闭大量节点，同时保证数据的完整性和集群的容错能力．其次，设计了一种基于历史记录的响应时间预测方 法，它根据服务器节点的数量、性能参数和运行时间的历史信息准确估计程序的响应时间，相对误差大都在6％以 下．最后，通过选择性地关闭部分节点以达到最小化能耗，同时保证应用程序的实时性能．文中证明了该优化问题 是NP—hard问题，并提出了一种启发式的节点关闭策略．实验结果表明，在节点关闭策略下MapReduce应用的实时 性得以保证，同时降低了大量的能耗． 关键词能耗管理；节点可开关；MapReduce；数据中心；绿色计算 中图法分类号TP393DOI号10．3724／SP．J．1016．2013．00977 Seadown：SLA—AwarePower in Size—ScalingManagement Cluster HeterogeneousMapReduce LINBinLIShan—ShanLIAO MENG LIU HUANGHe Xiang—Ke Ling—BingXiao—Dong (SchoolofComputer，NationalUniversityofDefenseTechnology，Changsha410073) Abstract accountsfor in Power a of costdatacenters consumption largeproportion operating whichadds toan billsandcarbon muchofthe organization’S substantially power footprint，while is classofworksareseeksturnoffserversfor wasted．One to low energy powersavingduring utilization mostofthemare constraineddata and