[发明专利]一种数据稽核方法及系统

说明书

本发明提供了一种数据稽核方法及系统，其中方法包括：获取包括所收集数据问题的稽核规则信息；对稽核规则信息进行归类，并根据归类后的稽核规则信息，生成稽核规则检核脚本；在预设的稽核规则沉淀库中对稽核规则检核脚本进行迭代稽核；根据迭代稽核后的稽核规则检核脚本进行数据稽核，得到稽核结果报告。本发明的技术方案会根据获取到的稽核规则信息自动生成对应的稽核规则检核脚本，对稽核规则检核脚本进行沉淀后，根据稽核规则检核脚本进行数据稽核并得到稽核结果报告。避免了传统数据稽核方法需要人工稽核导致的不够灵活和易出错的问题，以及人工编写检核脚本所带来的人力和物力成本，有利于提高工作效率。

技术领域

本发明涉及计算机信息管理系统领域，特别涉及一种数据稽核方法及系统。

背景技术

目前数据稽核的方法，大多是预先将待稽核的数据进行准备和预先通过专人设置问题稽核规则，并根据稽核数据和待稽核的规则对数据进行比对，通过比对形成数据差异分析。其从整体上不够灵活，需要花费大量的人力和物力成本，在数据质量提升上存在一定的局限性，其在处理多业务系统和多数据库的业务模式时，存在以下问题：

1、稽核数据“不集中、不及时”：传统数据稽核的做法要将稽核规则进行预置，并需要设定一系列定时器任务，提前将多个数据库的离线业务数据整合到一个分析库中。需要人工对抽取的数据进行清理，工作不够灵活且容易出错。

2、人工稽核方式“慢”：在人工维护系统数据质量系统稽核过程中，业务数据发生变化频繁，人工检核时间周期长。人工需要编写繁琐的检核脚本，投入大量的开发人员。数据分析随机性强，分析报告需要手工编写，工作效率低；

3、数据质量追踪“乱”：数据质量问题的发现、监控、整改、提升过程不可视、不可控、不可维。

4、检核规则可维护性“差”：传统工具必须指派专人对检核规则进行维护，在业务规则转化为技术规则过程中需要花费大量的人力和物力；维护人员往往缺乏对业务的理解，造成数据不准、规则重复。

发明内容

本发明技术方案的目的在于提供一种数据稽核方法及系统，用以解决传统的数据稽核方法在数据处理不够灵活，且需要花费大量人力和物力的问题。

未解决上述问题，本发明的实施例提供了一种数据稽核方法，包括：

获取包括所收集数据问题的稽核规则信息；

对稽核规则信息进行归类，并根据归类后的稽核规则信息，生成稽核规则检核脚本；

在预设的稽核规则沉淀库中对稽核规则检核脚本进行迭代稽核；

根据迭代稽核后的稽核规则检核脚本进行数据稽核，得到稽核结果报告。

具体地，如上所述的数据稽核方法，在获取包括所收集数据问题的稽核规则信息之前，方法还包括：

通过定期向第一目标负责端发送规则收集信息，获取第一目标负责端响应规则收集信息所提供的数据问题和/或稽核规则信息；

获取第二目标负责端所登记的数据问题和/或稽核规则信息。

优选地，如上所述的数据稽核方法，在获取包括所收集数据问题的稽核规则信息之后，方法还包括：

对稽核规则信息进行验重处理；

将通过验重处理的稽核规则信息保存至稽核规则储备库。

优选地，如上所述的数据稽核方法，根据归类后的稽核规则信息，生成稽核规则检核脚本的步骤，包括：

配置与归类后的稽核规则信息对应的数据源；

根据归类后的稽核规则信息，选择相对应的元数据和需要匹配的数据标准；