首页> 中文会议>第十一届全国软件与应用学术会议（NASAC2012） >面向MapReduce的自适应延迟调度算法

面向MapReduce的自适应延迟调度算法

页面导航

摘要
著录项
相似文献
相关主题

摘要

MapReduce已经成为主流的海量数据处理模式,调度作为其中的关键环节已受到业界的广泛关注.但是已有的调度算法难以达到公平性和数据本地性之间的平衡,在此本文提出了一种动态自适应的延迟调度算法,针对公平延迟调度算法静态设置延迟时间的不足,根据节点的释放速度动态调整作业的延迟等待时间,避免了节点释放速度快时,作业因静态延迟时间而进行的无效等待,从而减少了完成整个作业的响应时间.通过对基于Hadoop平台实现的原型系统的文本排序实验测试,实验结果表明,自适应的延迟调度算法相比已有的延迟调度算法在作业响应时间方面提升5％-8％.

著录项

来源
《第十一届全国软件与应用学术会议（NASAC2012）》|2012年|1-7|共7页
会议地点南京
作者
NING WenYu; 宁文瑜; WU QingBo; 吴庆波; TAN YuSong; 谭郁松;
展开▼
作者单位

中国计算机学会;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类算法理论;
关键词
延迟调度算法; 海量数据; 作业管理; 信息共享;

相似文献

中文文献
外文文献
专利

1. 面向MapReduce的自适应延迟调度算法 [J] . 宁文瑜 ,吴庆波 ,谭郁松 . 计算机工程与科学 . 2013,第003期
2. 异构环境下增强的自适应MapReduce调度算法 [J] . 杨立身 ,余丽萍 . 计算机工程与应用 . 2013,第019期
3. 面向多用户环境的MapReduce集群调度算法研究 [J] . 陈重韬 . 高技术通讯 . 2017,第004期
4. 基于小波分析的a-多样性k-匿名大数据自适应延迟调度算法 [J] . 王慧 ,程正兴 . 吉林大学学报（理学版） . 2020,第003期
5. EPA跨网段延迟自适应实时调度算法研究 [J] . 姜秀柱 ,徐钊 ,李向东 . 工矿自动化 . 2013,第010期
6. 基于数据中心负载分析的自适应延迟调度算法 [C] . 金嘉晖 ,罗军舟 ,宋爱波 . 《通信学报》学术论坛暨2011云计算学术会议 . 2011
7. 异构环境下增强自适应能力的MapReduce调度算法研究 [A] . 余丽萍 . 2013

面向MapReduce的自适应延迟调度算法

摘要

著录项

相似文献

相关主题

期刊订阅