-
公开(公告)号:CN118861013A
公开(公告)日:2024-10-29
申请号:CN202410008894.2
申请日:2024-01-03
Applicant: 上海宝信软件股份有限公司
IPC: G06F16/215 , G06F16/21 , G06F16/25
Abstract: 本发明提供了一种基于数据标准的自动数据质量规则生成方法及系统,包括:采集数据表元数据信息;对所述数据表中需要进行数据质量校验的表进行分析处理,并设定数据质量任务及对应的执行方式;根据分析结果以及所述元数据信息,自动生成数据质量规则;执行所述数据质量任务,并记录对应的数据质量校验结果及元数据信息;对所述数据质量校验结果进行分析统计,得到新的数据质量规则阈值的信息,并更新元数据中的对应数据质量设定信息。本发明基于数据平台的工业数据标准,对大量数据制定数据质量规则,以及自动生成与更新数据质量规则,能够使数据质量规则的配置规则化与自动化,并具备更强的时效性,显著提高工作效率。
-
公开(公告)号:CN118295990A
公开(公告)日:2024-07-05
申请号:CN202310012317.6
申请日:2023-01-05
Applicant: 上海宝信软件股份有限公司
IPC: G06F16/215 , G06F16/2455
Abstract: 本发明提供了一种数据中台自动质量规则校验和修复的方法和系统,包括:进行数据质量规则设置前,先完成对数据质量规则的值域的设置,然后根据值域的配置自动创建数据质量规则,并完成相应数据质量任务的创建;在进行数据质量规则配置时,指定数据质量异常数据的导出,当出现数据质量问题时,将出现问题的异常数据导出到相应的介质中,并根据数据质量规则给出相应的问题修复方案。
-