公开(公告)号：CN115272167A

公开(公告)日：2022-11-01

申请号：CN202210545711.1

申请日：2022-05-19

Applicant: 北京科技大学 ,  北京科技大学顺德研究生院

Inventor： 马博渊 ,  赵基淮 ,  班晓娟 ,  王笑琨

IPC: G06T7/00 ,  G06T7/33 ,  G06T5/50

Abstract: 本发明涉及一种跨模态图像生成和检测的方法及装置，属于图像处理和人工智能技术领域，能够实现跨模态生成医学影像，且完成目标检测；该方法包括：S1、获取两种以上模态的图像集并进行配准；S2、对图像集进行融合得到第一多模态融合图像；S3、利用第一多模态融合图像以及其对应的单模态图像对跨模态图像生成模型进行训练；S4、将第一多模态融合图像对应的单一模态图像输入跨模态图像生成模型中得到第二多模态融合图像；S5、将第二多模态融合图像和对应的第一多模态融合图像输入目标检测模型中进行训练；S6、对模型进行端到端调优，得到最终的跨模态图像生成模型和目标检测模型。

公开(公告)号：CN120070901A

公开(公告)日：2025-05-30

申请号：CN202510546772.3

申请日：2025-04-28

Applicant: 北京科技大学

Inventor： 马惠敏 ,  赵基淮 ,  卓君宝

IPC: G06V10/26 ,  G06V10/762 ,  G06T3/067

Abstract: 本发明提供一种基于多视角一致性的零样本点云实例分割方法和系统，包括：从三维点云对应的二维图像序列中提取多个关键帧；将分割关键帧生成的2D掩码作为提示，对二维图像序列进行分割和跟踪，得到所有物体的2D掩码；对三维点云进行超分割得到一系列超点，进行3D到2D的投影，获得每个超点在每张图像上的2D掩码，由2D掩码之间的亲和度分数表示超点之间的边，构建超点图；使用掩码一致性权重修正所述亲和度分数，赋予低质量掩码以低的权重得到修正后的超点图；通过多层次超点迭代图聚类，对具有不同视角一致性级别的超点进行分层合并得到3D实例分割结果。本发明可以对3D点云进行实例分割。