[发明专利]一种基于分组的元数据服务器集群管理方法

摘要

本发明公开了一种基于分组的元数据服务器集群管理方法，包括：将MDS集群中的N个MDS划分为M个分组，每个分组内有且只有一个主MDS，其余的为从MDS，将MD5哈希算法的哈希值范围平均划分为S个分段，将S个分段平均分配给M个分组中的N个MDS管理，每个MDS使用一张组内分段定位表和一张组外分段定位表保存分段的分配记录，任意一个MDS接收元数据对象定位请求，根据元数据对象路径名计算对应的分段并对分段进行定位，每个MDS上保存一张分段热度表，每当一个MDS返回一条分段的查询命中消息，该MDS就计算并更新自身分段热度表中对应分段的热度。本发明能够解决现有方法中存在元数据映射关系固定、元数据定位效率不高、MDS集群负载不均衡的问题。

主权项

一种基于分组的元数据服务器集群管理方法，其特征在于，包括以下步骤：（1）将MDS集群中的N个MDS划分为M个分组。其中第一个分组的编号为1，分组内MDS的数量为N1，分组内MDS的编号依次为1，2，…,N1；第二个分组的编号为2，分组内的MDS的数量为N2，分组内MDS的编号依次为1，2，…,N2；…；第M个分组的编号为M，分组内的MDS的数量为NM，分组内MDS的编号依次为1，2，…,NM。其中1≤M≤N，N1、N2、…NM均为正整数，且N1+N2+…+NM=N。每个分组内有且只有一个主MDS，分组内其余的MDS为从MDS。（2）将MD5哈希算法的哈希值范围划分为S个分段，并将S个分段平均分配给M个分组中的N个MDS管理，每个MDS建立一张组内分段定位表和一张组外分段定位表保存分段的分配记录；（3）任意一台MDS（G，A）接收来自客户端的元数据对象定位请求，其中G代表该MDS所在的分组编号，A代表该MDS在G号分组中的编号，从该请求中获取元数据对象的路径名P，使用MD5哈希算法对路径名P进行计算得到哈希值V，通过V获得分段编号T=V/（2128/S），其中P为非空的字符串，V为[0,2128‑1]范围内的一个正整数，并对T号分段进行定位；（4）每个MDS上建立一张分段热度表，当一个MDS返回一条T号分段的查询命中消息，该MDS更新自身分段热度表中T号分段的热度；（5）每个分组内的主MDS定期收集分组内所有MDS上的负载信息和分段热度表中的信息，当组内MDS出现负载不均衡时，将负载最高的MDS上的热度最高的分段迁移至负载最低的MDS；（6）判断是否需要处理下一个元数据对象定位请求，如果是，则转入步骤（3）,否则结束。