你好,游客 登录 注册 发布搜索
背景:
阅读新闻

[PDF]Hadoop系统map阶段的排序性能分析与优化

[日期:2014-07-16] 来源:电脑知识与技术   作者:周扬 张恒生 [字体: ]

Hadoop系统map阶段的排序性能分析与优化

周扬  张恒生

MapReduce计算框架已被广泛用于大规模数据分析的应用。虽然它具有弹性的可扩展性和细粒度的容错系统,然而性能却并不令人满意。MapReduce可以通过分配更多的计算节点来实现更好的性能,但是,这种做法并不符合成本效益。用户渴望MapReduce在提供弹性的可扩展性和细密度容错的同时,可以具有更高的计算效率。该文提出了一种动态优化map阶段排序性能的方法,并进行了测试,测试结果表明,该方法能够提升MapReduce的基准测试性能。


Hadoop系统map阶段的排序性能分析与优化

收藏 推荐 打印 | 录入:574107552 | 阅读:
相关新闻       Hadoop MapReduce 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数
点评:
       
评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款