公开(公告)号：CN117992438A

公开(公告)日：2024-05-07

申请号：CN202311797083.7

申请日：2023-12-25

Applicant: 北京机电工程研究所

Inventor： 常衢通 ,  刘超 ,  刘同林 ,  余金龙 ,  佘青 ,  徐言俊 ,  黄鑫 ,  王胜

IPC: G06F16/215 ,  G06F16/22

Abstract: 本发明涉及数据清洗技术领域，公开了一种数据清洗方法、装置及计算机可读存储介质。其中，该方法包括：对目标数据集进行加载；对加载后的目标数据集进行属性字段切分得到属性列表；按照数据分析算法对属性列表中每列的属性数据进行数据处理，并根据数据处理结果得到每列对应的单个属性的清洗规则；将所有列各自对应的单个属性的清洗规则进行数据聚合，生成整个属性列表的清洗规则；根据整个属性列表的清洗规则执行数据清洗。由此，动态生成清洗规则，从而在后续清洗过程中达到较高的清洗目的。并且，针对数据处理量大的问题，可以对数据项列进行切分处理，从而加快数据清洗的速度，提高数据清洗的效率。

公开(公告)号：CN118093574A

公开(公告)日：2024-05-28

申请号：CN202311785040.7

申请日：2023-12-25

Applicant: 北京机电工程研究所

Inventor： 刘超 ,  刘同林 ,  常衢通 ,  余金龙 ,  佘青 ,  徐言俊 ,  黄鑫 ,  王胜

IPC: G06F16/22 ,  G06F16/28 ,  G06F18/22

Abstract: 本发明公开一种数据融合汇聚方法、装置及计算机可读存储介质。其中，该方法包括：接入多源数据，对接入的多源数据进行数据归集，并将归集后的数据存入原始数据库中；加载唯一索引规则库；加载原始数据库中的待识别数据；对待识别数据进行类型分类；根据唯一索引规则表对分类后的数据进行匹配识别，在匹配的情况下生成唯一索引确认清单表；根据接入的多源数据对匹配的唯一性进行验证；在验证成功的情况下，将唯一索引确认清单表存入唯一索引规则库并记录每个唯一索引在唯一索引确认清单表所在位置以及每个唯一索引对应的数据内容；根据唯一索引确认清单表索引对原始数据库中已识别的数据执行融合操作，并将融合后的数据存储至融合数据库中。

公开(公告)号：CN116628789A

公开(公告)日：2023-08-22

申请号：CN202310395467.X

申请日：2023-04-13

Applicant: 北京机电工程研究所

Inventor： 刘同林 ,  吴康 ,  何云强 ,  佘青 ,  廖磊 ,  张虎 ,  曲胜志

IPC: G06F30/12 ,  G06F30/20 ,  G06T15/00 ,  G06T1/20

Abstract: 本发明提供了一种基于WebGIS的图元标绘系统设计方法及系统，该方法包括分析现有WebGIS前端框架图元标绘的共性信息，采用开闭原则封装为标绘图元处理器，配置统一的API；基于Vue.js框架构建标绘图元UI适配器，封装标绘面板组件，标绘面板组件至少包括标绘图元属性、坐标和样式；采用开源JSON Schema构建图元数据格式处理器，将输入数据转化为某一WebGIS前端框架标绘图元数据格式，验证标绘图元处理器提供的API是否缺少必填参数，缺少必填参数时发送提示信息。本发明结合现有主流WebGIS前端框架图元标绘的共性特点，实现了图元标绘方式统一，标绘图元属性面板统一，大大的提高了开发效率。

公开(公告)号：CN116668272A

公开(公告)日：2023-08-29

申请号：CN202310395500.9

申请日：2023-04-13

Applicant: 北京机电工程研究所

Inventor： 张克 ,  刘同林 ,  吴康 ,  佘青 ,  翟琪 ,  戈雅楠 ,  常衢通 ,  杨杰华

IPC: H04L41/0677 ,  H04L43/0811

Abstract: 本发明提供一种链路数据处理装置和方法，包括n个微服务单元，根据业务流程依次连接；n个微服务单元产物管理单元连接，每个微服务单元将产出物发送给产物管理单元，产出物根据链路关系进行存储，微服务单元从产物管理单元获取需要的输入数据；上传接口与所微服务单元和产物管理单元连接，将产物管理单元中微服务单元需要的数据上传给微服务单元；下载接口与微服务单元和产物管理单元连接，将微服务单元的产出物传送给产物管理单元中；数据分析单元与产物管理单元相连，通过判断数据的正确性，并通过产出物的链路关系获得产生错误产出物的微服务。本发明实现了微服务解耦和产出物集中管理。