期刊文献+
共找到2篇文章
< 1 >
每页显示 20 50 100
推测执行技术在HPMR系统通信优化中的应用 被引量:2
1
作者 王昊 王向前 郑启龙 《中国科学技术大学学报》 CAS CSCD 北大核心 2010年第11期1191-1196,共6页
HPMR(high performance MapReduce)系统是一个采用MapReduce模型的高性能计算软件支撑平台.在进行高性能计算时,HPMR往往需要很多轮Map-Reduce过程,中间的通信过程由KV路由和KV传输组成.KV传输依照KV路由阶段产生的KV路由表进行.HPMR程... HPMR(high performance MapReduce)系统是一个采用MapReduce模型的高性能计算软件支撑平台.在进行高性能计算时,HPMR往往需要很多轮Map-Reduce过程,中间的通信过程由KV路由和KV传输组成.KV传输依照KV路由阶段产生的KV路由表进行.HPMR程序的典型通信特征是每一轮的KV传输以高概率使用上一轮的KV路由表.根据这一特点,提出在HPMR的通信模型中引入推测执行技术,由此减少了KV路由的次数,使得HPMR的通信性能得到大大地提升. 展开更多
关键词 MAPREDUCE HPMR 推测执行 kv路由 kv传输
下载PDF
HPMR系统KV路由算法设计
2
作者 郑启龙 王向前 王昊 《计算机工程》 CAS CSCD 北大核心 2010年第20期102-105,共4页
提出一种针对HPMR系统的KV路由算法。HPMR系统是MapReduce模型的一个实现,改进了MapReduce模型以适应高性能计算的需求。HPMR的KV路由算法生成KV路由表,所有数据的收发动作将依据该路由表进行。KV路由算法产生的KV路由表直接决定HPMR系... 提出一种针对HPMR系统的KV路由算法。HPMR系统是MapReduce模型的一个实现,改进了MapReduce模型以适应高性能计算的需求。HPMR的KV路由算法生成KV路由表,所有数据的收发动作将依据该路由表进行。KV路由算法产生的KV路由表直接决定HPMR系统在通信阶段的时间开销。实验结果表明,该KV路由算法产生的KV路由表可以提高HPMR系统的通信性能。 展开更多
关键词 MAPREDUCE模型 高性能计算 DSS-kv路由算法
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部