[发明专利]一种基于HBase的数据均衡存储方法

摘要

本发明公开一种基于HBase的数据均衡存储方法，包括输入业务结构化数据；判断业务数据中的属性信息是否初始化到元数据表，如果没有，则简化业务数据中的属性信息并初始化到元数据表中；如果有，判断业务模块对应的数据年份表是否存在，如果不存在，则创建当前业务模块对应的数据年份表；如果存在，为业务数据中的所有数据行设计生成rowkey，并使用元数据表中简化的属性名称作为列名；将封装好的业务结构化数据存储到HBase中。本发明采用了预分区和特殊rowkey设计结构，保证rowkey能够均匀分布在每个region上，有效避免数据热点问题，防止数据倾斜，起到负载均衡作用，并且提高了数据读写效率。