[发明专利]一种日志批量采集方法、装置、电子设备及存储介质在审
申请号: | 202310928653.5 | 申请日: | 2023-07-26 |
公开(公告)号: | CN116932166A | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 张博 | 申请(专利权)人: | 中国银行股份有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F11/30;G06F16/18;G06F16/172 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王欢 |
地址: | 100818 *** | 国省代码: | 北京;11 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本申请公开了一种日志批量采集方法、装置、电子设备及存储介质,可应用于大数据领域或金融领域。在执行该方法时,先修改日志收集系统Flume的源码文件,得到修改后的源码文件,修改后的源码文件包括预设日志文件阈值;接着统计日志收集系统Flume中数据源组件Source在预设时间段内批量采集的日志文件的总数;若日志文件的总数大于预设日志文件阈值时,停止数据源组件Source批量采集所述日志文件,这样一来,通过增加预设日志文件阈值,当预设时间段内批量采集的日志文件的总数大于预设日志文件阈值,停止数据源组件Source继续批量采集日志文件,即停止往内存中添加新的数据,防止内存溢出,提高Flume系统运行的稳定性,进而提升日志批量采集的效率。 | ||
搜索关键词: | 一种 日志 批量 采集 方法 装置 电子设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310928653.5/,转载请声明来源钻瓜专利网。