你好,游客 登录 注册 发布搜索
背景:
阅读新闻

[硕士论文]基于Hadoop的学习资源分布模型设计研究

[日期:2014-08-27] 来源:沈阳师范大学   作者:郭松 [字体: ]

基于Hadoop的学习资源分布模型设计研究

沈阳师范大学   郭松

本文在分析现有的学习资源发展形势和国内外资源库及云计算应用的研究现状,结合Hadoop系统平台的自身关键技术和存储架构,设计了一种基于Hadoop云计算平台的海量学习资源分布模型。本课题以HDFS为文件存储,以HBase为元数据存储,构建在低廉的计算机集群上,实现海量学习资源存储的分布模型。该模型提高了系统的稳定性,扩展性和存取高效性。本课题重点研究的内容是在研究Hadoop关键技术的基础上,结合海量学习资源的特点,针对Hadoop在处理海量小文件时产生的高内存、高磁盘碎片及中心节点的压力过大等问题,设计了学习资源分布模型。在Hadoop模型的基础上进行优化,设计了以Hadoop为核心的四层架构模型,针对海量学习资源中有众多小文件和学习资源之间存在内在联系的特点,优化了学习资源文件的分布存储策略和元数据存储的数据结构,在实验室条件下使用七台计算机,借助虚拟机软件模拟部署了资源分布模型,并在此模型上进行现有数据的模拟测试。本课题通过对学习资源的特点设计了分布模型,满足了对资源存储的可靠性、高效性、可扩展性、低成本的要求。通过实验室的模拟测试,验证了模型的可用性和小学习资源文件的存储策略的正确性。


基于Hadoop的学习资源分布模型设计研究

收藏 推荐 打印 | 录入:574107552 | 阅读:
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数
点评:
       
评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款