-
公开(公告)号:CN118626477B
公开(公告)日:2025-01-21
申请号:CN202410647397.7
申请日:2024-05-23
Applicant: 北京京航计算通讯研究所 , 天津神舟通用数据技术有限公司
IPC: G06F16/215 , G06F16/25
Abstract: 本申请公开了一种面向航天离散制造平台的多源数据预处理方法及系统,涉及航天离散制造数据预处理技术领域,该方法包括:通过至少一个动态配置的适配器组件适配处理输入的多源异构数据,以使数据格式统一化和标准化,得到已适配数据;将已适配数据传输至分布式清洗引擎,分布式清洗引擎对已适配数据执行数据集合的错误检测、模式识别和逻辑一致性校正,得到清洗数据集;通过质量评估模块对清洗数据集计算数据质量指数;基于数据质量指数,动态调整清洗规则;通过预设的质量反馈控制机制,根据上层应用的需求和反馈提供数据追溯和校正指导,持续优化数据质量。本申请能够有效提高数据库系统的清洗规则可扩展性、动态柔性和继承重用性。
-
公开(公告)号:CN119293214A
公开(公告)日:2025-01-10
申请号:CN202411425226.6
申请日:2024-10-12
Applicant: 北京京航计算通讯研究所 , 中国航天科工飞航技术研究院 , 航天壹进制(江苏)信息科技有限公司
IPC: G06F16/334 , G06F11/14
Abstract: 本发明公开了一种高效检索海量数据中离散日志信息方法及系统,方法包括:在数据备份的过程中,将对应的日志文件元数据记录写入数据库;以deamon进程的方式,监听当前时间点数据库中新增日志文件,以顺序追加写入的方式持久化日志文件元数据分片至本地存储;创建基于当前时间点之前的一个检查点快照,并使用检查点快照构建日志文件元数据记录集临时快照表;通过并发比对日志文件元数据记录集临时快照表与日志文件元数据分片中记录的日志文件备份时间点,将最新日志文件元数据记录信息写入聚合表;将日志文件数据聚合写入存储数据块,以完成当前时间点为止的聚合。本发明能够有效节省存储空间,降低成本,提升了日志信息的检索性能。
-
公开(公告)号:CN118864967A
公开(公告)日:2024-10-29
申请号:CN202410930281.4
申请日:2024-07-11
Applicant: 北京京航计算通讯研究所
IPC: G06V10/764 , G06V10/80 , G06V10/82 , G06T7/00 , G06N3/0442 , G06N3/049 , G06N3/047 , G06N3/0464 , G06N3/084
Abstract: 本发明涉及一种面向装备离散制造的焊缝图像多类别分类方法,解决了现有焊缝检测方式难以保证质量以及焊缝缺陷识别不准确的问题。方法包括:获取焊缝样本图像构建训练数据集;基于训练数据集训练焊缝图像分类识别模型;焊缝图像分类识别模型包括基础特征提取模块、目标级注意力网络和跨模态长短期记忆网络;加载训练数据集至基础特征提取模块、经目标级注意力网络得到精细焊缝视觉特征;精细焊缝视觉特征通过softmax层与精细焊缝视觉特征进行跨模态对齐得到标签文本向量;加载训练数据集的焊缝缺陷标注和标签文本向量至跨模态长短期记忆网络,训练焊缝图像分类识别模型;利用训练好的焊缝图像分类识别模型识别焊缝底片,得到焊缝缺陷。
-
公开(公告)号:CN106227899A
公开(公告)日:2016-12-14
申请号:CN201610797518.1
申请日:2016-08-31
Applicant: 北京京航计算通讯研究所
CPC classification number: G06F16/33 , G06F16/27 , G06F16/284 , H04L67/1097 , H04L67/2842 , H04L67/2857
Abstract: 本发明属于软件设计与应用技术领域,具体涉及一种面向物联网大数据的存储和查询方法,其切合智慧城市领域的应用实际,具有强大的应用前景。该方法包括如下步骤:步骤S1:由传感器设备层采集数据;步骤S2:通过数据解析进行数据解析;步骤S3:通过数据存储层进行数据存储;步骤S4:通过数据查询层进行数据查询;与现有技术相比较,本发明提供一种在物联网大数据应用领域数据的高速存储和查询的方法,能够克服基于传统数据库存储和查询的缺点和不足。
-
公开(公告)号:CN118626477A
公开(公告)日:2024-09-10
申请号:CN202410647397.7
申请日:2024-05-23
Applicant: 北京京航计算通讯研究所 , 天津神舟通用数据技术有限公司
IPC: G06F16/215 , G06F16/25
Abstract: 本申请公开了一种面向航天离散制造平台的多源数据预处理方法及系统,涉及航天离散制造数据预处理技术领域,该方法包括:通过至少一个动态配置的适配器组件适配处理输入的多源异构数据,以使数据格式统一化和标准化,得到已适配数据;将已适配数据传输至分布式清洗引擎,分布式清洗引擎对已适配数据执行数据集合的错误检测、模式识别和逻辑一致性校正,得到清洗数据集;通过质量评估模块对清洗数据集计算数据质量指数;基于数据质量指数,动态调整清洗规则;通过预设的质量反馈控制机制,根据上层应用的需求和反馈提供数据追溯和校正指导,持续优化数据质量。本申请能够有效提高数据库系统的清洗规则可扩展性、动态柔性和继承重用性。
-
公开(公告)号:CN117743719A
公开(公告)日:2024-03-22
申请号:CN202311783222.0
申请日:2023-12-22
Applicant: 北京京航计算通讯研究所
IPC: G06F16/958 , G06F8/38 , G06F18/243 , G06F18/241 , G06N20/20 , G06N3/084
Abstract: 本发明涉及一种页面元素的识别方法,属于前端网页设计技术领域,解决现有网页元素识别方法的准确性低、效率低的技术问题。该方法包括收集真实前端页面元素进行预处理,得到真实样本集;基于所述真实样本集,对随机函数优化的生成对抗网络模型进行训练,得到训练好的生成对抗网络模型;基于训练好的生成对抗网络模型中的生成器获取生成样本集;将所述真实样本集和所述生成样本集组成训练样本集;基于所述训练样本集训练元素识别模型,达到预定训练迭代次数后得到训练好的元素识别模型;获取真实前端页面元素,基于训练好的元素识别模型,得到真实页面元素的识别结果。实现了前端页面元素自动化识别。
-
公开(公告)号:CN117743719B
公开(公告)日:2024-07-09
申请号:CN202311783222.0
申请日:2023-12-22
Applicant: 北京京航计算通讯研究所
IPC: G06F16/958 , G06F8/38 , G06F18/243 , G06F18/241 , G06N20/20 , G06N3/084
Abstract: 本发明涉及一种页面元素的识别方法,属于前端网页设计技术领域,解决现有网页元素识别方法的准确性低、效率低的技术问题。该方法包括收集真实前端页面元素进行预处理,得到真实样本集;基于所述真实样本集,对随机函数优化的生成对抗网络模型进行训练,得到训练好的生成对抗网络模型;基于训练好的生成对抗网络模型中的生成器获取生成样本集;将所述真实样本集和所述生成样本集组成训练样本集;基于所述训练样本集训练元素识别模型,达到预定训练迭代次数后得到训练好的元素识别模型;获取真实前端页面元素,基于训练好的元素识别模型,得到真实页面元素的识别结果。实现了前端页面元素自动化识别。
-
-
-
-
-
-