[发明专利]一种HDFS副本再复制改进方法有效
申请号: | 201910710730.3 | 申请日: | 2019-08-02 |
公开(公告)号: | CN110457280B | 公开(公告)日: | 2022-09-23 |
发明(设计)人: | 张静;潘雨哲 | 申请(专利权)人: | 南京邮电大学 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F9/50 |
代理公司: | 南京苏高专利商标事务所(普通合伙) 32204 | 代理人: | 颜盈静 |
地址: | 210012 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种HDFS副本再复制改进方法,当元节点检测到数据节点无效时,执行HDFS副本再复制改进策略,包括获取失效数据节点上的副本数据块序列;计算副本数据块序列中所有副本数据块的访问热度值,按照访问热度值从大到小对副本数据块进行排序,得到新的副本数据块序列;基于节点负载动态加权评价模型,选取数据节点的复制起点和终点,将新的副本数据块序列中的所有副本数据块依次执行复制。 | ||
搜索关键词: | 一种 hdfs 副本 复制 改进 方法 | ||
【主权项】:
1.一种HDFS副本再复制改进策略,当元节点检测到数据节点无效时,执行HDFS副本再复制改进策略,其特征在于:包括以下步骤:/n步骤1:获取失效数据节点上的副本数据块序列;/n步骤2:计算副本数据块序列中所有副本数据块的访问热度值,按照访问热度值从大到小对副本数据块进行排序,得到新的副本数据块序列;/n步骤3:基于节点负载动态加权评价模型,选取数据节点的复制起点和终点,将新的副本数据块序列中的所有副本数据块依次执行复制。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910710730.3/,转载请声明来源钻瓜专利网。