公开(公告)号：CN117274253B

公开(公告)日：2024-02-27

申请号：CN202311546437.0

申请日：2023-11-20

Applicant: 华侨大学

Inventor： 童斌斌 ,  温廷羲 ,  李静雯 ,  杨其建 ,  曾焕强

IPC: G06T7/00 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/08 ,  G06V10/80

Abstract: 本发明公开了一种基于多模态Transformer的零配件检测方法、装置及可读介质，涉及图像处理领域，包括：获取零配件的重量以及不同角度零配件图像叠加得到输入图像；构建零配件检测模型并训练，得到经训练的零配件检测模型，将输入图像和重量输入经训练的零配件检测模型，得到特征向量；建立包含已知型号的零配件的特征向量的零配件特征向量数据库；将待检测的零配件的输入图像和重量输入经训练的零配件检测模型，得到待检测的零配件的特征向量，将待检测的零配件的特征向量与零配件特征向量数据库中的特征向量进行比对，检测得到待检测的零配件的型号，解决传统的图像检测方法使用单一类型的数据对零配件型号检测的准确性差等问题。

公开(公告)号：CN117274253A

公开(公告)日：2023-12-22

申请号：CN202311546437.0

申请日：2023-11-20

Applicant: 华侨大学

Inventor： 童斌斌 ,  温廷羲 ,  李静雯 ,  杨其建 ,  曾焕强

IPC: G06T7/00 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/08 ,  G06V10/80

Abstract: 本发明公开了一种基于多模态Transformer的零配件检测方法、装置及可读介质，涉及图像处理领域，包括：获取零配件的重量以及不同角度零配件图像叠加得到输入图像；构建零配件检测模型并训练，得到经训练的零配件检测模型，将输入图像和重量输入经训练的零配件检测模型，得到特征向量；建立包含已知型号的零配件的特征向量的零配件特征向量数据库；将待检测的零配件的输入图像和重量输入经训练的零配件检测模型，得到待检测的零配件的特征向量，将待检测的零配件的特征向量与零配件特征向量数据库中的特征向量进行比对，检测得到待检测的零配件的型号，解决传统的图像检测方法使用单一类型的数据对零配件型号检测的准确性差等问题。