公开(公告)号：CN119089000A

公开(公告)日：2024-12-06

申请号：CN202411271459.5

申请日：2024-09-11

Applicant: 济南大学

Inventor： 牛冬梅 ,  张承宇 ,  韩小凡 ,  刁振宇 ,  聂慧佳 ,  马菽娴

IPC: G06F16/583 ,  G06F16/55 ,  G06V20/64 ,  G06V10/44 ,  G06V10/80 ,  G06V10/74 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

Abstract: 本公开涉及三维模型检索技术领域，提出了一种基于双重参数融合网络的多视图三维模型检索方法及系统，包括如下步骤：获取待检索三维模型对应的多视图；对光照多视图、深度多视图进行融合并提取特征，基于特征的相似度自适应设置权重参数，调整特征重要度得到第一层特征描述符；对厚度多视图进行特征提取并计算特征之间的相似度，取出最大相似度的视图通过空间注意力机制处理，得到第二层特征描述符；第一层特征描述符与第二层特征描述符基于特征描述符的特征得分进行加权融合，经过全连接层得到三维模型的分类类别；本公开能够提高多视图三维模型检索之间的特征聚合效果，降低多视图特征聚合过程中丢失关键特征，提高检索精度。

公开(公告)号：CN119377431A

公开(公告)日：2025-01-28

申请号：CN202411424580.7

申请日：2024-10-12

Applicant: 济南大学

Inventor： 牛冬梅 ,  韩小凡 ,  刁振宇 ,  聂慧佳 ,  张承宇 ,  李莹莹

IPC: G06F16/583 ,  G06F16/55 ,  G06V10/80 ,  G06V10/74 ,  G06V10/26 ,  G06V10/764

Abstract: 本发明公开了基于特征融合和视图分组的单图三维模型检索方法及系统，其中方法包括：将所述已知查询图像、所述无背景图像和所述每个三维模型对应的若干个视图，作为三维模型检索网络的输入值，将与查询图像最相似的三维模型作为三维模型检索网络的输出值，对三维模型检索网络依次采用第一、第二和第三损失函数进行训练，得到训练后的三维模型检索网络；将待查询图像、待查询图像的掩码图像、和三维模型集合，输入到微调后的三维模型检索网络中，得到待查询图像对应的图像特征，和每个三维模型对应的最终特征；计算待查询图像对应的图像特征，与每个三维模型对应的最终特征之间的相似度，选择最大相似度值对应的三维模型作为最终的检索结果输出。

公开(公告)号：CN118484558A

公开(公告)日：2024-08-13

申请号：CN202410633848.1

申请日：2024-05-21

Applicant: 济南大学

Inventor： 牛冬梅 ,  刁振宇 ,  韩小凡 ,  聂慧佳 ,  张承宇

IPC: G06F16/583 ,  G06F16/532 ,  G06T7/33 ,  G06N3/0455 ,  G06N3/0895

Abstract: 本公开提供了基于单幅图像跨模态融合的三维模型检索方法及系统涉及三维模型检索技术领域，包括：获取待查询图像和多视图三维模型集合；将待查询图像和已渲染成多视图的三维模型集合，输入至训练后的基于单幅图像跨模态融合网络中，输出检索的对应的三维模型；单幅图像跨模态融合网络引入数据交换过程，将图像域数据以设定概率给三维模型域额外的通道，将模型域数据以设定概率给图像域额外的通道；并各自在图像域网络和三维模型域网络进行域特征对齐后输入跨模态网络中，融合不同模态的信息，使用对比学习中可以解决三元组损失的难分负样本挖掘的问题。