[发明专利]一种存储系统操作日志的聚合方法及相关装置在审
申请号: | 201811296971.X | 申请日: | 2018-11-01 |
公开(公告)号: | CN109344139A | 公开(公告)日: | 2019-02-15 |
发明(设计)人: | 白学余;翟亚永;杨富强 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06N20/00 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 聚合点 聚合 存储系统操作 操作日志 聚合方式 删除 计算机可读存储介质 存储系统 聚合装置 删除操作 相关装置 自动删除 原有的 申请 服务器 | ||
本申请公开了一种存储系统操作日志的聚合方法,包括:根据聚合方式确定聚合点数量,根据所述聚合点数量构造聚合点的循环列表;根据所述聚合方式依次对所述循环列表内的聚合点循环进行日志聚合;当循环到已进行日志聚合的聚合点时,将所述聚合点的操作日志进行删除,对删除操作日志的聚合点进行日志聚合。通过将日志聚合分布在循环列表的聚合点循环进行日志聚合,当循环到已进行日志聚合的聚合点时,只需要将原有的操作日志进行删除,再进行日志聚合,实现了操作日志的自动删除,避免了人工进行操作,提高了存储系统的可靠性。本申请还公开了一种存储系统操作日志的聚合装置、服务器以及计算机可读存储介质,具有以上有益效果。
技术领域
本申请涉及计算机技术领域,特别涉及一种存储系统操作日志的聚合方法、聚合装置、服务器以及计算机可读存储介质。
背景技术
目前在分布式对象存储中,对存储数据进行操作会得到相应的操作日志,包括用户级操作日志和桶级操作日志。通过对操作日志的追溯功能,可以方便用户对一段时间内用户或桶的数据操作进行追溯,以便对数据进行恢复。在分布式存储系统中只要开始记录分布式对象存储的操作日志,就会不断记录分布式存储的操作日志,并且系统一般以小时为单位对日志数据进行聚合,当系统的并发流量不断增多时,按照小时为单位的聚合方式,会使单个聚合点的数据过大,影响系统的运行性能。
现有技术中,为了解决聚合点数据过多的问题,一般都是系统管理人员按照经验对数据进行删除操作或保留操作,分布式存储系统无法自主、自动的对日志数据进行选择。但是,在无人值守的时候,就缺失了对分布式存储系统的操作日志进行删除的操作,操作日志随着时间推移会保存过多,影响存储系统性能。并且,为了删除存储系统中的操作日志必须要管理人员进行操作,增加了分布式存储系统的维护成本,还无法避免人为操作的错误,降低分布式存储系统的可靠性。
因此,如何使分布式存储系统的操作日志在聚合过程中自动进行删除是本领域技术人员关注的重点问题。
发明内容
本申请的目的是提供一种存储系统操作日志的聚合方法、聚合装置、服务器以及计算机可读存储介质,通过将日志聚合分布在循环列表的聚合点循环进行日志聚合,当循环到已进行日志聚合的聚合点时,只需要将原有的操作日志进行删除,再进行日志聚合,实现了操作日志的自动删除,避免了人工进行操作,提高了存储系统的可靠性。
为解决上述技术问题,本申请提供一种存储系统操作日志的聚合方法,包括:
根据聚合方式确定聚合点数量,根据所述聚合点数量构造聚合点的循环列表;
根据所述聚合方式依次对所述循环列表内的聚合点循环进行日志聚合;
当循环到已进行日志聚合的聚合点时,将所述聚合点的操作日志进行删除,对删除操作日志的聚合点进行日志聚合。
可选的,根据聚合方式确定聚合点数量,根据所述聚合点数量构造聚合点的循环列表,包括:
对所述聚合方式进行特征数据采集,得到聚合特征数据;
根据聚合点数量机器学习模型对所述聚合特征数据进行样本计算,得到所述聚合点数量,根据所述聚合点数量构造聚合点的循环列表;
其中,所述聚合点数量机器学习模型是根据日志聚合样本进行训练得到的。
可选的,根据聚合方式确定聚合点数量,根据所述聚合点数量构造聚合点的循环列表,包括:
获取系统硬件资源,根据所述系统硬件资源和所述聚合方式确定聚合点数量,根据所述聚合点数量构造聚合点的循环列表。
可选的,还包括:
获取系统实时硬件资源;
根据所述实时硬件资源对所述循环列表的聚合点数量进行动态调整。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811296971.X/2.html,转载请声明来源钻瓜专利网。