期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
1
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
基于任务进度感知的异构Hadoop云平台任务调度方案
被引量：
5
1
作者
刘莹
罗兴宇
+1 位作者
王宁
罗强
《计算机应用研究》
CSCD
北大核心
2017年第10期3139-3143,共5页
针对异构Hadoop云计算平台中任务调度问题进行了研究,并分析了现有推测执行调度和LATE调度方案的缺陷,提出一种基于任务进度感知的自适应任务调度方案。首先,根据当前计算节点上的任务进度情况,估计任务近似完成时间(ATE),以此确定掉队...
针对异构Hadoop云计算平台中任务调度问题进行了研究,并分析了现有推测执行调度和LATE调度方案的缺陷,提出一种基于任务进度感知的自适应任务调度方案。首先,根据当前计算节点上的任务进度情况,估计任务近似完成时间(ATE),以此确定掉队者(straggler)任务;然后,以平均节点任务进度的25%为阈值,将节点分为慢节点和快节点。当straggler后备任务达到一定阈值时,将其优先分配到快节点中执行。实验结果表明,提出的方案能够为异构Hadoop平台合理分配任务,有效降低了任务完成时间和响应延迟,同时提高了平台吞吐量。
展开更多
关键词
Hadooo云平台
任务
调度
任务
进度
感知
掉队者
任务
节点分类
下载PDF
职称材料
题名
基于任务进度感知的异构Hadoop云平台任务调度方案
被引量：
5
1
作者
刘莹
罗兴宇
王宁
罗强
机构
重庆邮电大学移通学院计算机科学系
重庆邮电大学计算机科学与技术学院
出处
《计算机应用研究》
CSCD
北大核心
2017年第10期3139-3143,共5页
基金
重庆市教委科学技术研究项目(KJ1502003)
重庆市本科高校"三特行动计划"特殊专业建设项目(渝教高(2013)49号)
文摘
针对异构Hadoop云计算平台中任务调度问题进行了研究,并分析了现有推测执行调度和LATE调度方案的缺陷,提出一种基于任务进度感知的自适应任务调度方案。首先,根据当前计算节点上的任务进度情况,估计任务近似完成时间(ATE),以此确定掉队者(straggler)任务;然后,以平均节点任务进度的25%为阈值,将节点分为慢节点和快节点。当straggler后备任务达到一定阈值时,将其优先分配到快节点中执行。实验结果表明,提出的方案能够为异构Hadoop平台合理分配任务,有效降低了任务完成时间和响应延迟,同时提高了平台吞吐量。
关键词
Hadooo云平台
任务
调度
任务
进度
感知
掉队者
任务
节点分类
Keywords
Hadoop cloud platform
task scheduling
task progress aware
straggler task
node classification
分类号
TP393.07 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
基于任务进度感知的异构Hadoop云平台任务调度方案
刘莹
罗兴宇
王宁
罗强
《计算机应用研究》
CSCD
北大核心
2017
5
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
