一种数据处理方法、装置、系统、电子设备和存储介质

    公开(公告)号:CN118277624B

    公开(公告)日:2024-08-27

    申请号:CN202410702438.8

    申请日:2024-05-31

    Abstract: 本申请实施例提供一种数据处理方法,涉及数据处理技术领域。包括:通过多个分布式计算节点并行读取图结构数据;每个计算节点确定读取的批数据中每个顶点的原始id对应的目标计算节点,并将其发送至对应的目标计算节点进行存储;每个计算节点对自身存储的原始id进行去重处理,并确定出未编码的原始id;每个计算节点基于对应的编码id区间对自身存储的未编码的原始id进行连续编码;多个计算节点对应的编码id区间连续,且编码id区间中的可编码id数量与未编码的原始id数量相同,每个计算节点将读取的批数据中点数据和/或边数据的顶点的原始id替换为编码id,得到编码后的点数据和/或边数据,并将其存储在自身的存储空间中。

    一种数据处理方法、装置、系统、电子设备和存储介质

    公开(公告)号:CN118277624A

    公开(公告)日:2024-07-02

    申请号:CN202410702438.8

    申请日:2024-05-31

    Abstract: 本申请实施例提供一种数据处理方法,涉及数据处理技术领域。包括:通过多个分布式计算节点并行读取图结构数据;每个计算节点确定读取的批数据中每个顶点的原始id对应的目标计算节点,并将其发送至对应的目标计算节点进行存储;每个计算节点对自身存储的原始id进行去重处理,并确定出未编码的原始id;每个计算节点基于对应的编码id区间对自身存储的未编码的原始id进行连续编码;多个计算节点对应的编码id区间连续,且编码id区间中的可编码id数量与未编码的原始id数量相同,每个计算节点将读取的批数据中点数据和/或边数据的顶点的原始id替换为编码id,得到编码后的点数据和/或边数据,并将其存储在自身的存储空间中。

    实体关系联合抽取方法及电子设备

    公开(公告)号:CN114357179A

    公开(公告)日:2022-04-15

    申请号:CN202111509942.9

    申请日:2021-12-10

    Abstract: 本申请提供了实体关系联合抽取方法及电子设备。本申请实施例中,在从目标文本抽取实体关系时,需要依赖于用于反映实体之间关联信息的句子依存分析树,并在预测出目标文本中的潜在三元组后基于句子依存分析树以及全局主客实体对约束矩阵生成模型对潜在三元组进行筛减,以过滤掉冗余三元组,得到最终真实的实体关系三元组信息,这提高了实体关系抽取结果的准确度,并有效解决错误累积、冗余实体以及重叠关系等问题。

Patent Agency Ranking