一种基于视觉基础模型驱动的3D高斯泼溅视觉重定位方法

    公开(公告)号:CN119963641A

    公开(公告)日:2025-05-09

    申请号:CN202510019952.6

    申请日:2025-01-07

    Abstract: 本发明公开了一种基于视觉基础模型驱动的3D高斯泼溅视觉重定位方法,包括如下步骤:S1、3D高斯泼溅空间表征构建与高层次特征提取;S2、2D‑3D特征匹配与位姿优化,利用2D‑3D特征匹配方法对初始估计位姿进行调整以获得更精确的位姿,采用关键点稀疏化减少空间和计算资源消耗以提高处理效率和实时性;S3、精确定位结果获取与鲁棒性、计算负担评估,最终获取精确的定位结果,达到环境变化条件下的高鲁棒性,本发明克服现有3D视觉重定位框架适应性差、重定位精度不高及资源占用等较大问题,通过充分利用视觉基础模型的全局特征描述能力,结合3D高斯泼溅技术,实现了在动态环境中具有鲁棒性、可扩展性和高度环境适应性的高精度、实时性视觉重定位。

    一种基于多教师模型的知识蒸馏方法

    公开(公告)号:CN118379568B

    公开(公告)日:2024-09-24

    申请号:CN202410834565.3

    申请日:2024-06-26

    Applicant: 浙江大学

    Abstract: 本发明提供了一种基于多教师模型的知识蒸馏方法,涉及图像处理技术领域,所述方法包括:确定多个教师模型中的主模型,将其他的教师模型作为辅模型;将辅模型的特征方向与主模型对齐,获得对齐特征;将对齐特征沿第二维度与主模型的特征叠加获得扩展特征,其中,扩展特征的特征维度高于主模型或辅模型的维度;对学生模型的中间层进行特征映射,获得映射特征;对扩展特征进行掩码处理,获得第一掩码特征;映射特征进行掩码处理,获得第二掩码特征;根据第一掩码特征和第二掩码特征确定掩码范数方向损失;根据损失函数优化学生模型,通过优化后的学生模型对图片进行分类识别,保证有效减少多教师模型知识蒸馏带来的知识损失。

    一种基于多教师模型的知识蒸馏方法

    公开(公告)号:CN118379568A

    公开(公告)日:2024-07-23

    申请号:CN202410834565.3

    申请日:2024-06-26

    Applicant: 浙江大学

    Abstract: 本发明提供了一种基于多教师模型的知识蒸馏方法,涉及图像处理技术领域,所述方法包括:确定多个教师模型中的主模型,将其他的教师模型作为辅模型;将辅模型的特征方向与主模型对齐,获得对齐特征;将对齐特征沿第二维度与主模型的特征叠加获得扩展特征,其中,扩展特征的特征维度高于主模型或辅模型的维度;对学生模型的中间层进行特征映射,获得映射特征;对扩展特征进行掩码处理,获得第一掩码特征;映射特征进行掩码处理,获得第二掩码特征;根据第一掩码特征和第二掩码特征确定掩码范数方向损失;根据损失函数优化学生模型,通过优化后的学生模型对图片进行分类识别,保证有效减少多教师模型知识蒸馏带来的知识损失。

    基于视觉与语言模型的零样本异常检测方法、装置及设备

    公开(公告)号:CN119941644A

    公开(公告)日:2025-05-06

    申请号:CN202411946095.6

    申请日:2024-12-27

    Abstract: 本发明提供了一种基于视觉与语言模型的零样本异常检测方法、装置及设备,涉及异常检测技术领域,所述方法包括:从同一批次图像中获取推理图像和参考图像;通过第一多模态模型,分别对所述推理图像和所述参考图像进行双模态检测,获得初始掩码;通过第二多模态模型分别提取所述同一批次图像的特征并分别进行特征聚合,获得聚合推理特征和聚合参考特征;根据所述初始掩码,对所述聚合参考特征进行噪声特征过滤,获得非异常聚合参考特征,根据所述非异常聚合参考特征和所述聚合推理特征获得初始异常分数;根据所述初始异常分数和所述初始掩码进行掩码精炼,获得最终推理掩码,用于实现零样本异常检测。

    通道修剪方法、装置、计算机设备及存储介质

    公开(公告)号:CN115640834A

    公开(公告)日:2023-01-24

    申请号:CN202211363379.3

    申请日:2022-11-02

    Applicant: 浙江大学

    Abstract: 本申请涉及通道修剪方法、装置、计算机设备及存储介质,应用于包含卷积层的神经网络,神经网络应用于图像处理,卷积层包括通道,所述方法包括:根据图像数据,获取卷积层的秩;根据图像数据,获取卷积层的熵;根据卷积层的秩和熵,获取卷积层的总体指标;根据总体指标得到每个卷积层的修剪比;获取卷积层中通道的沙普利值;根据通道的沙普利值和卷积层的修剪比,对卷积层中的通道进行修剪。本发明的通道修剪方法,能通过通道修剪,提高神经网络的性能,从而提高图像处理的效率。

    一种小样本棉花害虫目标检测方法

    公开(公告)号:CN116012711A

    公开(公告)日:2023-04-25

    申请号:CN202310021496.X

    申请日:2023-01-07

    Applicant: 浙江大学

    Abstract: 本发明涉及一种小样本棉花害虫目标检测方法,通过对图像进行随机混合增强处理来有效增强目标其他部位特征的检测能力,提高棉花害虫的检测准确率,并通过骨干网络获得特征信息后,采用不同空洞数的空洞卷积操作获得多尺度特征图,扩大卷积运算的感受野,然后通过施加注意力机制增强局部特征的提取能力,从而能够提取图像中更多棉花害虫的特征信息,增强检测模型的泛化能力,提高小样本目标检测准确性。

Patent Agency Ranking