数据清洗方法、装置及计算机可读存储介质

    公开(公告)号:CN117992438A

    公开(公告)日:2024-05-07

    申请号:CN202311797083.7

    申请日:2023-12-25

    Abstract: 本发明涉及数据清洗技术领域,公开了一种数据清洗方法、装置及计算机可读存储介质。其中,该方法包括:对目标数据集进行加载;对加载后的目标数据集进行属性字段切分得到属性列表;按照数据分析算法对属性列表中每列的属性数据进行数据处理,并根据数据处理结果得到每列对应的单个属性的清洗规则;将所有列各自对应的单个属性的清洗规则进行数据聚合,生成整个属性列表的清洗规则;根据整个属性列表的清洗规则执行数据清洗。由此,动态生成清洗规则,从而在后续清洗过程中达到较高的清洗目的。并且,针对数据处理量大的问题,可以对数据项列进行切分处理,从而加快数据清洗的速度,提高数据清洗的效率。

    知识卡片的构建方法及装置

    公开(公告)号:CN112905612A

    公开(公告)日:2021-06-04

    申请号:CN202110167514.6

    申请日:2021-02-07

    Abstract: 本发明提供了知识卡片的构建方法及装置,该方法包括:从原始数据库中获取至少一条原始数据;针对至少一条原始数据中的每一条原始数据,确定当前原始数据的至少一个第一三元组信息,其中,每一个第一三元组信息中包含两个实体、两个实体之间的关系或者实体属性信息;根据第一三元组信息,生成待构建知识图谱的本体库;根据待构建知识图谱的本体库,生成待构建知识图谱;根据待构建知识图谱,生成待构建知识卡片;当监测到原始数据库中存在一条新增原始数据时,确定新增原始数据的至少一个新增第一三元组信息,更新本体库;根据更新后的本体库,更新待构建知识卡片。本方案能够提高知识卡片构建的智能化程度。

    数据融合汇聚方法、装置及计算机可读存储介质

    公开(公告)号:CN118093574A

    公开(公告)日:2024-05-28

    申请号:CN202311785040.7

    申请日:2023-12-25

    Abstract: 本发明公开一种数据融合汇聚方法、装置及计算机可读存储介质。其中,该方法包括:接入多源数据,对接入的多源数据进行数据归集,并将归集后的数据存入原始数据库中;加载唯一索引规则库;加载原始数据库中的待识别数据;对待识别数据进行类型分类;根据唯一索引规则表对分类后的数据进行匹配识别,在匹配的情况下生成唯一索引确认清单表;根据接入的多源数据对匹配的唯一性进行验证;在验证成功的情况下,将唯一索引确认清单表存入唯一索引规则库并记录每个唯一索引在唯一索引确认清单表所在位置以及每个唯一索引对应的数据内容;根据唯一索引确认清单表索引对原始数据库中已识别的数据执行融合操作,并将融合后的数据存储至融合数据库中。

    一种链路数据处理装置和方法
    6.
    发明公开

    公开(公告)号:CN116668272A

    公开(公告)日:2023-08-29

    申请号:CN202310395500.9

    申请日:2023-04-13

    Abstract: 本发明提供一种链路数据处理装置和方法,包括n个微服务单元,根据业务流程依次连接;n个微服务单元产物管理单元连接,每个微服务单元将产出物发送给产物管理单元,产出物根据链路关系进行存储,微服务单元从产物管理单元获取需要的输入数据;上传接口与所微服务单元和产物管理单元连接,将产物管理单元中微服务单元需要的数据上传给微服务单元;下载接口与微服务单元和产物管理单元连接,将微服务单元的产出物传送给产物管理单元中;数据分析单元与产物管理单元相连,通过判断数据的正确性,并通过产出物的链路关系获得产生错误产出物的微服务。本发明实现了微服务解耦和产出物集中管理。

    基于复杂网络的通信体系结构参数化建模方法

    公开(公告)号:CN112580217A

    公开(公告)日:2021-03-30

    申请号:CN202011567215.3

    申请日:2020-12-25

    Abstract: 本发明提供了一种基于复杂网络的通信体系结构参数化建模方法,包括:S1、通过对基于复杂网络的典型海战场概念级通信体系结构复杂性进行分析,获取典型海战场概念级通信体系结构的基本特征与交互关系;S2、创建基于复杂网络的海战场概念级通信体系结构参数化模型;S3、构建面向作战环的装备体系网多维度能力分析与评估的指标库;S4、在测试平台上使用模拟数据集进行建模与分析。本发明所述的基于复杂网络的通信体系结构参数化建模方法基于复杂网络的理论对各武器装备系统间的协同关系和动力学行为进行综合研究,不仅可以刻画武器装备系统个体,而且可对武器装备体系整体的复杂性及涌现性进行描述。

Patent Agency Ranking