一种基于大模型高效参量微调的电力巡检目标检测方法

    公开(公告)号:CN118247483A

    公开(公告)日:2024-06-25

    申请号:CN202410286002.5

    申请日:2024-03-13

    Applicant: 湖南大学

    Abstract: 本申请涉及一种基于大模型高效参量微调的电力巡检目标检测方法,该方法包括:获取电力巡检场景下的数据集,并对数据集进行预处理,将预处理后的数据集按比例划分为训练集和测试集;以视觉转换器模型为基础,并在其每层Transformer块后放置额外的微调模块,构建出基于大模型高效参量微调方法的电力巡检目标检测模型;将训练集训练输入至电力巡检目标检测模型,通过反向传播更新微调模块的模块参数,得到训练后的电力巡检目标检测模型;将测试集输入至训练后的电力巡检目标检测模型,得到电力巡检目标检测结果。该方法既能够保留大模型的强泛化能力,又能够根据具体的应用场景进行灵活调整,从而提高电力巡检目标检测的精度和效率。

    一种基于多模态融合的无人系统三维目标检测方法和装置

    公开(公告)号:CN118172632A

    公开(公告)日:2024-06-11

    申请号:CN202410292746.8

    申请日:2024-03-14

    Applicant: 湖南大学

    Abstract: 本申请涉及一种基于多模态融合的无人系统三维目标检测方法及装置,所述方法包括以下步骤:获取待检测的道路场景的二维图像和三维点云数据,并输入多模态融合检测模型;多模态融合检测模型包括时序动态卷积融合模块,其利用三维位置嵌入编码器,根据前一帧的三维世界空间坐标与前一帧的二维图像特征生成前一帧的三维位置感知特征,前一帧的三维位置感知特征经位姿变换后作为当前帧的补充位置感知特征;根据当前帧的补充位置感知特征与当前帧的三维点云特征生成第一融合帧三维点云特征;基于第一融合帧三维点云特征和当前帧的二维图像特征得到初步融合特征,基于初步融合特征输出检测结果。该方法可解决远处目标识别困难的问题。

    一种多模态融合的复杂受限场景下高压输电线路巡检方法

    公开(公告)号:CN118097350A

    公开(公告)日:2024-05-28

    申请号:CN202410104069.2

    申请日:2024-01-25

    Applicant: 湖南大学

    Abstract: 本申请涉及一种多模态融合的复杂受限场景下高压输电线路巡检方法,该方法包括:采集高压输电线路的二维图以及三维点云数据;基于所述二维图和所述三维点云数据,构建高压输电线路检测数据集,并将数据集按比例划分为训练集和验证集;构建多模态融合感知的高压输电线路巡检模型;所述高压输电线路巡检模型包括深度补全模块、体素筛选模块、抗噪声卷积模块、多任务检测头预测模块;基于所述训练集训练所述高压输电线路巡检模型;将所述验证集输入至训练好的高压输电线路巡检模型,并经过后处理模块筛选,输出目标检测结果。该方法不仅可以在复杂受限环境下实时评估,并且省去了人工肉眼检索的繁杂操作,更减少了误判行为的发生。

    一种基于前景感知增强的多模态目标检测系统及检测方法

    公开(公告)号:CN119723062B

    公开(公告)日:2025-05-09

    申请号:CN202510208849.6

    申请日:2025-02-25

    Applicant: 湖南大学

    Abstract: 本发明公开了一种基于前景感知增强的多模态目标检测系统及检测方法,充分结合了二维图像和三维点云的优势,并解决了前景点关注度低的问题。本发明通过前背景掩码机制以及焦点卷积模块,在二维和三维特征中分别强化前景信息,并通过通道和空间注意力模块进一步优化特征表达。最终,经过通道级联的增强融合特征经过区域建议网络和置信度前馈网络,筛选出置信度较高的检测结果。根据其目标类别确定不同的初始权重,计算预测边界框和真实边界框内前背景点的数量差异和位姿差异来进行损失聚合,并进行反向传播,以进一步优化预测边界框的位置精度,前景感知的聚合损失函数在训练过程中提供有效监督,进一步提升了模型的鲁棒性和准确性。

    基于三维高斯泼溅的大型装配场景的动态实时渲染方法

    公开(公告)号:CN119229031B

    公开(公告)日:2025-03-07

    申请号:CN202411747851.2

    申请日:2024-12-02

    Applicant: 湖南大学

    Abstract: 本发明公开了一种基于三维高斯泼溅的大型装配场景的动态实时渲染方法,通过多个传感器相结合,构建一个用于动态场景实时渲染的三维高斯泼溅模型,该方法可以渲染装配场景的任意视角。三维高斯泼溅模型包括传感器数据对齐、三维高斯泼溅模型的初始化、三维高斯泼溅模型的预测与更新,结合三维高斯泼溅模型,设计了场景空间点对齐与预测器,解决多传感器数据信息冗余、动态实时渲染困难的难题,这个方法提高了装配的安全性与可靠性,能及时发现和处理装配过程中的问题,有助于推动工业智能制造快速且高质量的发展,从而推动工业制造智能化的转型。

    一种电力设备域适应语义分割方法

    公开(公告)号:CN117351204A

    公开(公告)日:2024-01-05

    申请号:CN202311338659.3

    申请日:2023-10-17

    Applicant: 湖南大学

    Abstract: 一种电力设备域适应语义分割方法,包括:1、构建源域数据集、测试数据集和目标域数据集;2、构建三个模块;3、对学生模型进行训练,并获取伪标签,利用目标域数据集和伪标签对学生模型进行训练;对原型提取辅助模块进行训练;4、获取域特征、目标域特征原型;5、利用源域、目标域特征原型分别对源域数据集、目标域数据集中的特征进行特征级聚类,利用源域、目标域特征原型分别对目标域、源域数据集的图像进行交叉一致性聚类;6、重复3至5,迭代设定次数后,选择最好的权重,得到最终学生模型。本发明通过特征级聚类和交叉一致性聚类改善了特征聚集性和模型的泛化能力以及分类能力,使得模型在午间的电力设备图像上也能获得很好的效果。

    一种基于无人系统的激光点云三维目标检测方法

    公开(公告)号:CN116758497A

    公开(公告)日:2023-09-15

    申请号:CN202310279707.X

    申请日:2023-03-21

    Applicant: 湖南大学

    Abstract: 本发明提供了一种基于无人系统的激光点云三维目标检测方法包括如下步骤:步骤S1:获取基于无人系统的激光点云数据集,对所述激光点云数据集进行预处理,将预处理后的激光点云数据集按照预设比例1:1分为训练集和测试集;步骤S2:构建基于无人系统的激光点云三维目标检测模型;步骤S3:将所述训练集输入至所述激光点云三维目标检测模型,得到训练好的激光点云三维目标检测模型;步骤S4:将所述测试集输入至所述训练好的激光点云三维目标检测模型,得到三维目标检测结果。本发明所提出的动态边缘卷积模块与自适应特征融合网络具有更加丰富与精细的特征表示,提高激光点云三维目标检测的精度。

Patent Agency Ranking