你好,游客 登录 注册 发布搜索
背景:
阅读新闻

[PDF]Hadoop平台的多队列作业调度优化方法研究

[日期:2014-02-20] 来源:CNKI  作者:李春艳 何一舟 戴彬 [字体: ]

Hadoop平台的多队列作业调度优化方法研究

李春艳 何一舟 戴彬

本文对Hadoop平台的作业调度算法进行了研究,提出了支持作业类型区分的多队列调度优化算法。优化算法支持根据节点当前的负载情况分配不同类型的作业,以提高节点的资源利用率;允许作业队列的资源在闲置时被其它作业队列占用;在原作业队列需要时可以被即时回收,即回收过程支持任务抢占;采用共享队列列表和非共享队列列表的逻辑划分来防止乒乓效应。Hadoop平台的性能测试结果表明,优化算法相比系统默认算法,在作业调度的执行效率、执行平稳性等方面都有了显著的提升。


Hadoop平台的多队列作业调度优化方法研究

收藏 推荐 打印 | 录入:574107552 | 阅读:
相关新闻       Hadoop 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数
点评:
       
评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款