-
公开(公告)号:CN117891818A
公开(公告)日:2024-04-16
申请号:CN202410107017.0
申请日:2024-01-25
Applicant: 南威软件股份有限公司
Abstract: 本发明属于数据处理技术领域,公开了一种基于数据对比的多数据源对账方法、系统及计算机设备,通过生成hashCode对原始数据进行拆分成为带编号的小数据块,实现对账双方的原始数据化整为零;通过对比编号相同的小数据块中的hashCode,完成原始数据的对账工作。通用的数据差异化对比方案,将对比的两者数据中每条记录生成hashCode,通过对比hashCode来完成两者数据的差异对比。本发明生成对账数据的hashCode和数据分块,从而通过对比相同编号的小数据块来完成整体数据的对账工作,提高对账效率。本发明使用的是对数据生成hashCode并对数据进行拆分,通过对比拆分数据来进一步完成数据对账的。
-
公开(公告)号:CN117332013A
公开(公告)日:2024-01-02
申请号:CN202311437252.6
申请日:2023-11-01
Applicant: 南威软件股份有限公司
Abstract: 本发明涉及一种基于Debezium的组件化增量数据同步方法,其包括Debezium的Oracle连接器捕获并记录发生在Oracle服务器上的数据库中的行级更改。本申请提案增量方法中通过数据库CDC方案解决组件化增量同步服务。本申请提案采用Debezium技术分析底层日志即可得到真实数据进行入库,不能识别的数据库字段采用读取SQL语句得到数据再进行入库操作。本方案同时支持两种入库操作,无需过多的存储技术。
-