一种兼顾负载均衡的Hadoop集群动态节能方法

CORC > 重庆绿色智能技术研究院 > 中国科学院重庆绿色智能技术研究院 > 大数据挖掘及应用中心

	一种兼顾负载均衡的Hadoop集群动态节能方法
	田文洪; 李国忠; 陈瑜; 黄超杰; 杨吴同
刊名	清华大学学报(自然科学版)
	2016-11-15
期号	11 页码:1226-1231
关键词	分布式计算 Hadoop 调度算法动态负载均衡节能调度
英文摘要	Hadoop集群广泛应用于企业和研究机构的大数据处理和并行计算中。该文针对Hadoop集群节点管理中缺少动态负载均衡和节能相互结合的调度技术的现状,提出一种动态负反馈调整算法,并设计和实现了一个用于Hadoop平台节点动态管理的系统。通过大量Hadoop经典测试用例测试,结果表明：该算法能够有效提高负载均衡并通过减少节点的空闲时间以有效地节能,与未使用本算法的结果相比,节点平均空闲休眠时间增加25%,节能14%。同时通过与其他算法相比,节点间均衡度有一定程度提升,平均负载方差减少10%。
语种	中文
内容类型	期刊论文
源URL	[http://119.78.100.138/handle/2HOD01W0/5189]
专题	大数据挖掘及应用中心
作者单位	(1) 电子科技大学信息与软件工程学院(2)中国科学院重庆绿色智能技术研究院
推荐引用方式 GB/T 7714	田文洪,李国忠,陈瑜,等. 一种兼顾负载均衡的Hadoop集群动态节能方法[J]. 清华大学学报(自然科学版),2016(11):1226-1231.
APA	田文洪,李国忠,陈瑜,黄超杰,&杨吴同.(2016).一种兼顾负载均衡的Hadoop集群动态节能方法.清华大学学报(自然科学版)(11),1226-1231.
MLA	田文洪,et al."一种兼顾负载均衡的Hadoop集群动态节能方法".清华大学学报(自然科学版) .11(2016):1226-1231.