一种数据处理方法及装置
    11.
    发明授权

    公开(公告)号:CN110275917B

    公开(公告)日:2025-03-11

    申请号:CN201910496089.8

    申请日:2019-06-10

    Inventor: 郭铭睿 夏勇 李凌

    Abstract: 本发明公开了一种数据处理方法及装置,涉及数据处理领域,其中方法包括:对源端分布式架构数据库发起N个数据抽取、转换和装载ETL进程;N为大于0的整数;所述N个ETL进程用于在数据仓库中生成第一目标表;当所述N个ETL进程在执行过程中存在M个失败的ETL进程时,重新发起所述N个ETL进程;当重新发起的所述N个ETL进程成功执行时,获取重新发起的所述N个ETL进程在所述数据仓库中生成的所述第一目标表,以及对所述第一目标表进行统计汇总生成的第一结果表;当所述第一结果表存在数据缺失时,对所述第一结果表进行数据修复。该方法可应用于金融科技(Fintech)。

    数据处理框架的实现方法、装置、设备及计算机存储介质

    公开(公告)号:CN111400319A

    公开(公告)日:2020-07-10

    申请号:CN202010180672.0

    申请日:2020-03-13

    Inventor: 刘建波 夏勇

    Abstract: 本发明公开了一种数据处理框架的实现方法、装置、设备及计算机存储介质,涉及金融科技技术领域。该方法包括:创建目标序列号生成器;创建目标序列号生成器工厂类,继承Spring Batch的默认序列号生成器工厂类,并重写目标序列号生成器工厂类中继承的getIncrementer方法,以将继承的getIncrementer方法中的MySQL序列号生成器替换为目标序列号生成器;创建目标配置器类,继承Spring Batch的默认配置器类,并重写目标配置器类中继承的createJobRepository方法,以指定序列号生成器工厂类为目标序列号生成器工厂类。本发明能够避免序列号生成失败的问题、以实现在TiDB上运行Spring Batch。

    基于分布式环境的批处理方法、系统、装置、设备及介质

    公开(公告)号:CN110263096A

    公开(公告)日:2019-09-20

    申请号:CN201910518008.X

    申请日:2019-06-14

    Abstract: 本发明公开了一种基于分布式环境的批处理方法、系统、装置、设备及介质,涉及金融科技领域,该方法包括以下步骤:通过获取分布式环境下的当日事件参数,确定所述当日事件参数是否符合预设延时条件;若所述当日事件参数符合预设延时条件,则确定与所述预设延时条件相对应的日切时间点;将所述与所述预设延时条件相对应的日切时间点发送至分布式子节点,以供所述分布式子节点在所述日切时间点进行交易日期切换。实现了根据当日金融系统的实际运营情况灵活变更日切时间点,通过将日切时间点统一下发至各个分布式子节点,实现了通过统一的日切机制保证多个子系统日切时间的一致性,进而提高了金融系统的稳定性和智能性。

    软件测试方法、电子设备及存储介质

    公开(公告)号:CN114090431A

    公开(公告)日:2022-02-25

    申请号:CN202111324919.2

    申请日:2021-11-10

    Abstract: 本申请公开了一种软件测试方法、电子设备及存储介质,应用于第一设备的软件测试方法包括:在执行第一测试用例之前,激活第一测试用例相关的所有Mock方法;每个Mock方法中包括第一声明,且第一声明的格式与Mock方法对应的第一Java方法的第二声明的格式相同;在执行第一测试用例的过程中,向第二设备发送第一测试指令;在执行完第一测试用例的情况下,对已激活的所有Mock方法进行去激活;第一测试指令用于指示第二设备调用被测试的第一源码文件中的第一Java方法进行测试;第一Java方法中设有第一字节码;第一字节码用于指示第二设备在调用对应的第一Java方法进行测试之前,反射调用对应的Mock方法进行测试。

    文件处理方法、装置、设备及计算机可读存储介质

    公开(公告)号:CN110457260A

    公开(公告)日:2019-11-15

    申请号:CN201910761804.6

    申请日:2019-08-14

    Inventor: 夏勇 李凌

    Abstract: 本发明涉及金融科技技术领域,公开了一种文件处理方法、装置、设备及计算机可读存储介质。该文件处理方法包括:在接收到文件处理请求时,根据所述文件处理请求获取待处理文件及其文件名称,并根据所述文件名称从预设配置表中获取对应的配置信息;根据所述配置信息和第一预设规则对所述待处理文件进行转换处理,得到待处理Java对象;根据所述配置信息中的处理类名,调用对应的执行器对所述待处理Java对象进行处理,得到处理结果Java对象;根据所述配置信息和第二预设规则对所述处理结果Java对象进行转换处理,得到处理结果文件。本发明能够通过配置的方式实现文件的自动化处理,以减少开发人员的工作量、提高开发效率。

Patent Agency Ranking