-
公开(公告)号:CN119130931A
公开(公告)日:2024-12-13
申请号:CN202411142402.5
申请日:2024-08-20
Applicant: 清华大学
IPC: G06T7/00
Abstract: 本发明提出一种零样本图像异常检测方法及装置,属于计算机视觉和图像异常检测领域。其中,所述方法包括:将待检测目标的图像输入预设的零样本图像异常检测网络,该网络包括图像编码器和文本编码器,通过多模态提示学习,图像编码器输出图像的局部视觉特征,文本编码器输出可学习提示嵌入的文本特征;通过计算局部视觉特征与文本特征的余弦相似度并插值得到相似图,并用相似度测量得到异常图,进而得到输入图像的异常检测结果。本发明通过构建多模态的提示学习来增强特征表示的灵活性和提示的泛化能力,可以降低人工设计提示工程的复杂性,并构建出更好的异常检测提示,从而提高零样本异常检测模型的效果。