你好,游客 登录 注册 发布搜索
背景:
阅读新闻

[硕士论文]MapReduce仿真及Hadoop公平调度算法研究

[日期:2014-04-15] 来源:CNKI  作者:李志娟 [字体: ]

MapReduce仿真及Hadoop公平调度算法研究

哈尔滨工程大学  李志娟

本文贡献在于对MapReduce编程模型进行仿真实现,并搭建基于虚拟化平台的Hadoop集群,通过在不同的四个实验下运行MapReduce作业,研究不同调度算法的性能以及节点故障对作业性能的影响。本文在九个节点上搭建Hadoop集群,并设计四种不同的实验方案执行MapReduce作业,通过分析作业运行结果,评估不同调度算法性能。结果表明:1)先进先出调度算法比较适合于单用户作业的执行;2)公平共享调度算法能够在存在多个作业的情况下在不同作业之间公平共享集群资源;3)对于加入延迟时间的公平份额调度算法而言,不同作业最佳延迟时间的选择不是一成不变的,不同延迟时间对不同作业影响不同;4)发生普通单节点故障严重影响作业执行效率。


MapReduce仿真及Hadoop公平调度算法研究

收藏 推荐 打印 | 录入:574107552 | 阅读:
相关新闻       Hadoop  MapReduce 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数
点评:
       
评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款