公开(公告)号：CN118552998A

公开(公告)日：2024-08-27

申请号：CN202410778438.6

申请日：2024-06-17

Applicant: 华中师范大学

Inventor： 田元 ,  蔡行 ,  陈迪 ,  姚璜

IPC: G06V40/16 ,  G06V10/764 ,  G06V10/77 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了基于八元数正交ViT的表情识别方法和系统，包括：对输入层输入的原始表情图片进行预处理，然后将预处理后的图片输入到八元数正交特征分解模块中，得到七组正交子特征；八元数正交表示模块将七组正交子特征通过设计的八元数正交表示函数构造成一个八元数特征矩阵；八元数Vision Transformer模块中将上述八元数正交表示模块中生成的八元数特征矩阵，依次进行通道补丁编码、八元数多头自注意力机制、八元数卷积前馈网络和八元数多层感知机，以提取并处理八元数特征；将八元数特征矩阵通过全连接层得到最终的表情概率输出。本发明在保证模型低参数量的基础上，提升了自然条件下表情识别精度。