公开(公告)号：CN116416645A

公开(公告)日：2023-07-11

申请号：CN202310199941.1

申请日：2023-03-03

Applicant: 华侨大学 ,  厦门亿联网络技术股份有限公司

Inventor： 朱建清 ,  许荣衔 ,  陈永平 ,  陈继平 ,  曾焕强 ,  蔡灿辉 ,  廖昀 ,  杜吉祥

IPC: G06V40/10 ,  G06V10/82 ,  G06N3/08 ,  G06V10/74 ,  G06N3/0464

Abstract: 本发明公开了一种基于双分支Transformer网络的属性与图像跨模态行人再辨识方法及装置，获取行人属性和行人图像，行人图像来自行人注册图像集；构建双分支Transformer网络，并对双分支Transformer网络训练，得到属性与图像跨模态行人再辨识模型，双分支Transformer网络包括同型的属性Transformer分支和图像Transformer分支；将行人属性和行人图像输入属性与图像跨模态行人再辨识模型，分别通过属性Transformer分支和图像Transformer分支提取得到属性特征和图像特征；将属性特征与图像特征进行相似度比对，得到行人属性对应的再辨识结果。属性Transformer分支和图像Transformer分支都属于同型的Transformer结构，有利于控制文本属性和行人图像在特征空间中的模态异质性问题，从而提升属性‑图像跨模态行人再辨识准确性。

公开(公告)号：CN116109880A

公开(公告)日：2023-05-12

申请号：CN202310088624.2

申请日：2023-02-09

Applicant: 华侨大学 ,  厦门亿联网络技术股份有限公司

Inventor： 朱建清 ,  陈永平 ,  许荣衔 ,  陈继平 ,  曾焕强 ,  杜吉祥 ,  廖昀

IPC: G06V10/77 ,  G06V10/80 ,  G06V10/82 ,  G06N3/08

Abstract: 本发明提供一种鬼影方位视觉注意力学习方法。现有方位视觉注意力学习方法依赖卷积运算进行维度变换以及方位信息学习，计算和参数代价都较高。为此，本发明将轻量的鬼影模块耦合到方位视觉注意力学习方法中，设计降维鬼影模块轻量化压缩特征映射图，随后进行方位信息学习以节约计算和参数代价；设计去冗余鬼影模块降低特征映射图中的冗余信息，能改善特征质量。本发明作为一种新颖的视觉注意力机制有广泛应用，例如图像目标检测、图像目标识别、图像分割等。