-
公开(公告)号:CN118172706A
公开(公告)日:2024-06-11
申请号:CN202410421554.2
申请日:2024-04-09
Applicant: 安徽大学
IPC: G06V20/40 , G06V10/44 , G06V10/82 , G06N3/0442 , G06N3/08
Abstract: 本发明公开了一种基于空间‑立体融合的事件流区分识别方法,属于事件相机技术领域,事件流利用双流框架对事件进行表示,将每个图像特征和事件体素特征分别分为三个级别,通过交换模块对双模态特征的数据进行数据交换处理,混合中等质量特征、交换低质量特征;将双模态特征与瓶颈特征一起输入融合Transformer模块;之后采用基于GRU的读出层进行增强;最后输出分类结果。本发明增强了模型的特征表达能力;引入交换模块避免了因直接融合特征得到次优解的问题;引入瓶颈机制和融合Transformer模块,使得模型有效地降低了计算复杂性和模型的复杂性,同时降低过拟合的风险;采用基于GRU的读出层,使得模型能够全面探索和利用特征之间的相关性。