你好,游客 登录 注册 发布搜索
背景:
阅读新闻

[PDF]Hadoop平台数据访问监控机制研究

[日期:2014-12-13] 来源:计算机工程与应用  作者:王玉凤 梁毅 金翊 李光瑞 [字体: ]

Hadoop平台数据访问监控机制研究

王玉凤 梁毅 金翊 李光瑞

针对Hadoop平台数据被任务调度感知,进行本地化处理的新特征,探索Haoop平台中Map任务数据访问监控机制。提出Hadoop平台数据访问监控不仅应服务于数据存取效率的提升,还应服务于Map/Reduce并行作业执行效率提升的基本思想,并增加对并行执行多Map任务数据访问开销均衡性的监控。基于该思想,定义Hadoop平台数据访问监控的粒度和监控信息组成;依托Hadoop平台现有结构,设计了基于master-slave的监控体系结构,并给出了监控主要功能模块的具体实现技术及测试结果。


Hadoop平台数据访问监控机制研究

收藏 推荐 打印 | 录入:574107552 | 阅读:
相关新闻       Hadoop Map/Reduce 监控 数据访问 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数
点评:
       
评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款