-
公开(公告)号:CN118334330A
公开(公告)日:2024-07-12
申请号:CN202410358422.X
申请日:2024-03-27
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 中国电建集团昆明勘测设计研究院有限公司
发明人: 钱勇 , 毛莺池 , 赵培双 , 李洪波 , 潘祯祥 , 廖贵能 , 陈时 , 彭欣欣 , 张礼兵 , 刘军显 , 李耀德 , 王海燕 , 吴智明 , 马江霞 , 杨福平 , 赵家尧 , 吴永奇 , 孙亚民 , 孔岩鑫 , 查海华 , 李临国 , 李景卫 , 陈汝春
IPC分类号: G06V10/26 , G06V10/44 , G06V10/80 , G06V10/82 , G06N3/0464
摘要: 本发明公开一种基于双向跨模态注意力机制的RGB‑D大坝缺陷图像语义分割方法,对输入的RGB‑D大坝图像进行特征提取,利用两个并行的分层Transformer网络分阶段提取多种分辨率大小的RGB图像特征图和深度图像特征图;将各阶段提取到的两种特征图一起输送到特征校准模块CA‑FCM,利用通道注意力机制对来自两种模态的特征进行相互校准,过滤彼此的噪声信息;将同一级别校准后的特征送入特征融合模块CM‑FFM,基于跨模态注意力机制进一步地完善RGB特征图和深度特征图,并融合成单个特征图;将融合后的特征图由多层感知机组成的解码器进行解码,转换成语义分割图。本发明解决了对RGB‑D大坝缺陷图像特征提取不充分,以及无法有效融合RGB特征图和深度特征图的问题,从而提高了RGB‑D大坝缺陷图像语义分割的精度。
-
公开(公告)号:CN115457006B
公开(公告)日:2023-08-22
申请号:CN202211164829.6
申请日:2022-09-23
申请人: 华能澜沧江水电股份有限公司 , 河海大学 , 华能集团技术创新中心有限公司
IPC分类号: G06T7/00 , G06V10/764 , G06V10/82 , G06V20/17 , G06V10/74 , G06N3/0464 , G06N3/045 , G06N3/096 , G06N3/098
摘要: 本发明公开一种基于相似一致性自蒸馏的无人机巡检缺陷分类方法及装置,设计了一个自蒸馏缺陷图像分类模型,采用自蒸馏训练策略压缩模型以便于在小型应用设备上实现高精度图像分类工作,该模型主要分为两部分:基于相似一致性知识构建和相似一致性知识传递。基于相似一致性知识构建部分通过计算Mini‑batch内实例间的相关关系,得到相似矩阵。相似一致性知识传递部分则在自蒸馏缺陷图像分类模型层间传递相似矩阵,细化底层次相似性,捕获丰富的上下文场景和局部特征信息。本发明针对图像分类模型容量大且复杂,无法在小型无人载具设备上使用的问题,设计了自蒸馏模型,提高缺陷图像的分类效率和精度。
-
公开(公告)号:CN115147375B
公开(公告)日:2023-07-25
申请号:CN202210786339.3
申请日:2022-07-04
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
IPC分类号: G06T7/00 , G06V10/44 , G06V10/774 , G06V10/82 , G06N3/0464 , G06Q10/0639 , G06Q50/08
摘要: 本发明公开了一种基于多尺度注意力的混凝土表面缺陷特征检测方法,包括以下步骤:构建围绕分层结构思想的多尺度图像注意力网络结构,网络将特征提取分为四个层级,分别处理不同尺度的特征图像;构建基于维度裁剪的多头注意力模块,对多头注意力机制嵌入维度裁剪计算,通过消减输入的特征向量维度降低高分辨率特征图像计算冗余;构建注意力聚合结构,通过卷积和汇集等空间操作将各层注意力特征按照划分策略进行聚合,以聚焦图像细节,提高图像特征精度。本发明有效收缩各层级缺陷图像尺寸大小,可减少模型的计算冗余并提高计算速率,同时通过构建注意力聚合模块能够促进图像全局信息耦合,聚焦缺陷图像特征精度。
-
公开(公告)号:CN115410103A
公开(公告)日:2022-11-29
申请号:CN202211067860.8
申请日:2022-09-01
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司 , 中国电建集团昆明勘测设计研究院有限公司
发明人: 毛莺池 , 王佳俊 , 张宗亮 , 肖海斌 , 陈豪 , 王孜博 , 郭有安 , 王子成 , 王龙宝 , 廖贵能 , 彭欣欣 , 聂兵兵 , 汪国斌 , 王川 , 余意 , 吴光耀 , 翟笠
IPC分类号: G06V20/17 , G06V20/10 , G06V10/774 , G06V10/778 , G06N20/20
摘要: 本发明公开一种基于联邦学习的大坝缺陷识别模型快速收敛方法,通过梯度方差缩减和全局动量下降技术,分别对大坝缺陷识别模型的本地训练阶段和全局聚合阶段进行了梯度修正。梯度方差缩减技术根据全局模型和本地模型的差异程度,调整本地模型梯度,减少设备间模型参数的离散性;根据权重控制机制,检测全局模型的历史精度变化率,动态调整本地梯度的修正程度,保证在收敛阶段本地参数更新的稳定性。在全局聚合阶段根据动量梯度下降技术,综合全局模型参数的历史变化状态,减少全局模型参数的振荡,提高全局模型收敛速度。本发明解决了无人机巡检图片大批量上传难、易泄露问题,缓解客户端漂移现象,解决了大坝缺陷识别模型收敛缓慢的问题。
-
公开(公告)号:CN113139570A
公开(公告)日:2021-07-20
申请号:CN202110242719.6
申请日:2021-03-05
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
IPC分类号: G06K9/62
摘要: 本发明公开了一种基于最优混合估值的大坝安全监测数据补全方法,包括,将大坝安全监测数据集划分为训练集和测试集,其中,训练集为完整子数据集,测试集为缺失子数据集;基于训练集采用XgBoost算法构建最优预测模型;采用最优预测模型对测试集中各数据所属类的概率分布进行预测,生成测试集样本概率向量;基于测试集样本概率向量进行聚类;对于连续型数据存在缺失,则用所属类中对应特征属性的均值来补全数据;对于离散型数据缺失,则将该条数据所属类的极大似然估计作为补全数据。本发明方法解决了混合数据集中各类数据缺失的问题,可对大坝安全监测数据集的特征进行有效评估,具有更强的泛化能力和更精确的补全效果。
-
公开(公告)号:CN110260914A
公开(公告)日:2019-09-20
申请号:CN201910371947.6
申请日:2019-05-06
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于测点时空特征的工程安全监测系统区域划分方法,包括测点时空特征表示和区域划分两个阶段;在测点时空特征表示阶段:采用一种时序降噪自动编码器,压缩高维监测数据表增测点时序特征,通过归一化方法表示测点空间特征(坐标位置信息、测点属性等)。在区域划分阶段:采用一种基于测点时空特征的区域划分方法,引入辅助目标变量优化区域划分目标函数,使区域划分结果反映结构体运行物理规律,将全局安全评判问题分治到局部单域上。本发明通过分析测点监测数据变化规律,实现对大坝运行工况综合评判,为工程安全分析提供决策依据。
-
公开(公告)号:CN117975246A
公开(公告)日:2024-05-03
申请号:CN202410002724.3
申请日:2024-01-02
申请人: 河海大学 , 华能澜沧江水电股份有限公司
IPC分类号: G06V10/96 , G06V10/98 , G06V10/774
摘要: 本发明公开一种基于ONNX的目标检测模型库系统构建方法,根据图像数据集,采用适应的目标检测模型训练,得到训练好的模型;根据实际模型输入,将训练好模型转化为开放神经网络交换ONNX格式,并将模型统一部署到服务器ONNXRuntime环境,实现跨框架的深度学习模型部署;使用ONNXRuntime得到模型推理结果,为每个模型编写独立的推理代码,将结果转化为系统所需的统一格式;根据检测结果进行可视化处理,在系统中展示检测后的图像以及相应的评价指标;模型库系统包含模型注册、模型展示和模型服务三个模块。模型注册是将ONNX格式模型上传到系统中;模型展示是展现模型库系统中所有已注册模型;模型服务是用户根据需求调用模型在ONNXRuntiem环境下推理,并展示推理结果。
-
公开(公告)号:CN115457006A
公开(公告)日:2022-12-09
申请号:CN202211164829.6
申请日:2022-09-23
申请人: 华能澜沧江水电股份有限公司 , 河海大学 , 华能集团技术创新中心有限公司
摘要: 本发明公开一种基于相似一致性自蒸馏的无人机巡检缺陷分类方法及装置,设计了一个自蒸馏缺陷图像分类模型,采用自蒸馏训练策略压缩模型以便于在小型应用设备上实现高精度图像分类工作,该模型主要分为两部分:基于相似一致性知识构建和相似一致性知识传递。基于相似一致性知识构建部分通过计算Mini‑batch内实例间的相关关系,得到相似矩阵。相似一致性知识传递部分则在自蒸馏缺陷图像分类模型层间传递相似矩阵,细化底层次相似性,捕获丰富的上下文场景和局部特征信息。本发明针对图像分类模型容量大且复杂,无法在小型无人载具设备上使用的问题,设计了自蒸馏模型,提高缺陷图像的分类效率和精度。
-
公开(公告)号:CN115147375A
公开(公告)日:2022-10-04
申请号:CN202210786339.3
申请日:2022-07-04
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于多尺度注意力的混凝土表面缺陷特征检测方法,包括以下步骤:构建围绕分层结构思想的多尺度图像注意力网络结构,网络将特征提取分为四个层级,分别处理不同尺度的特征图像;构建基于维度裁剪的多头注意力模块,对多头注意力机制嵌入维度裁剪计算,通过消减输入的特征向量维度降低高分辨率特征图像计算冗余;构建注意力聚合结构,通过卷积和汇集等空间操作将各层注意力特征按照划分策略进行聚合,以聚焦图像细节,提高图像特征精度。本发明有效收缩各层级缺陷图像尺寸大小,可减少模型的计算冗余并提高计算速率,同时通过构建注意力聚合模块能够促进图像全局信息耦合,聚焦缺陷图像特征精度。
-
公开(公告)号:CN113139571B
公开(公告)日:2022-08-02
申请号:CN202110255306.1
申请日:2021-03-09
申请人: 河海大学 , 华能澜沧江水电股份有限公司 , 华能集团技术创新中心有限公司
摘要: 本发明公开了一种基于时空多视图融合的大坝安全监测数据补全方法,包括,根据大坝安全监测数据的特点,在全局空间视图、全局时间视图、局部空间视图、局部时间视图上分别抽象出视图模型;将四个模型利用lasso回归进行融合,产生时空多视图融合模型;利用时空多视图融合模型生成补全数据。在时空特征强相关的情况下,该方法可以很好的解决大坝安全监测数据中存在的块状缺失和局部缺失等问题,且经过在真实大坝安全监测数据上验证,该方法比以往经典算法和传统时空模型具有更小的误差和更好的补全效果。
-
-
-
-
-
-
-
-
-