你好,游客 登录 注册 发布搜索
背景:
阅读新闻

[PDF]一种基于历史信息的一致性哈希集群重复数据删除路由策略

[日期:2015-07-13] 来源:  作者:邢玉轩 肖侬 刘芳 付印金 李芳 巫小泉 [字体: ]

一种基于历史信息的一致性哈希集群重复数据删除路由策略

邢玉轩 肖侬 刘芳  付印金 李芳 巫小泉

全球数据量爆炸式增长, 单节点重复数据删除系统已不能满足性能需求, 集群重复数据删除系统应运而生。如何提高数据传输效率、节约网络带宽和增强系统的可扩展性,成为当前面临的严峻挑战。我们提出一种基于历史数据信息的一致性哈希路由策略,通过在本地缓存热点数据块指纹, 数据路由前先在本地索引,可以大大减少索引消息请求数量,并且采用一致性哈希的路由策略, 有效的缓解集群系统中动态扩展存储节点导致的全局数据重删率急剧恶化与负载不均。 我们在三类真实的数据集上进行试验, 能减少20%~80%的指纹消息请求,动态扩展存储节点导致数据缩减率降低保持在 33%以下,并且能够很好地保持系统节点间负载均衡。


一种基于历史信息的一致性哈希集群重复数据删除路由策略

 

收藏 推荐 打印 | 录入:574107552 | 阅读:
相关新闻       一致性 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数
点评:
       
评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款