一种基于数据分片的并行对比数据库表数据的方法

    公开(公告)号:CN117131058A

    公开(公告)日:2023-11-28

    申请号:CN202311369907.0

    申请日:2023-10-23

    Abstract: 本发明公开一种基于数据分片的并行对比数据库表数据的方法,本发明涉及数据对比领域,设置对应的线程池和两端数据库,所述两端数据库用于储存相关的数据信息;通过线程池采集两端数据库中需要对比的数据信息,生成表对任务;分析表对任务是否需要进行分片处理,根据分析结果对其进行分片处理;将分片处理的数据进行拼接整合,组成新的任务对;将所组成的任务对通过线程池进行查询,根据查询结果组成数据对任务;设置数据对比引擎,将数据对任务通过数据对比引擎进行对比分析,输出对比结果;本发明的有益效果为在一定程度上降低了数据量的粒度,提高了并行度和对比效率。

    一种大对象存储、查询方法、装置、设备及介质

    公开(公告)号:CN116756093A

    公开(公告)日:2023-09-15

    申请号:CN202311038429.5

    申请日:2023-08-17

    Abstract: 本申请公开了一种大对象存储、查询方法、装置、设备及介质,所述方法包括:获取待存储的大对象,确定大对象的类型;对大对象执行第一类存储操作,包括:根据大对象的类型,确定大对象的索引信息和索引信息存储方式;按照索引信息存储方式存储索引信息,以及,若索引信息不包括大对象的数据内容,则将大对象的数据内容存储到大对象段;或,对大对象执行第二类存储操作,包括:根据大对象的类型,判断是否需要生成大对象的索引信息;若是,则根据大对象的类型,确定大对象的索引信息和索引信息存储方式,按照索引信息存储方式存储索引信息,并将大对象的数据内容存储到大对象段;或,若否,则将大对象的数据内容存储到大对象属性列。

    一种大对象存储、查询方法、装置、设备及介质

    公开(公告)号:CN116756093B

    公开(公告)日:2023-11-03

    申请号:CN202311038429.5

    申请日:2023-08-17

    Abstract: 本申请公开了一种大对象存储、查询方法、装置、设备及介质,所述方法包括:获取待存储的大对象,确定大对象的类型;对大对象执行第一类存储操作,包括:根据大对象的类型,确定大对象的索引信息和索引信息存储方式;按照索引信息存储方式存储索引信息,以及,若索引信息不包括大对象的数据内容,则将大对象的数据内容存储到大对象段;或,对大对象执行第二类存储操作,包括:根据大对象的类型,判断是否需要生成大对象的索引信息;若是,则根据大对象的类型,确定大对象的索引信息和索引信息存储方式,按照索引信息存储方式存储索引信息,并将大对象的数据内容存储到大对象段;或,若否,则将大对象的数据内容存储到大对象属性列。

Patent Agency Ranking