公开(公告)号：CN116092165A

公开(公告)日：2023-05-09

申请号：CN202310143635.6

申请日：2023-02-21

Applicant: 厦门大学

Inventor： 张俊松 ,  柳栋怀

IPC: G06V40/16 ,  G06V10/82 ,  G06N3/0442 ,  G06N3/0464 ,  G06N3/0475 ,  G06N3/084 ,  A61B5/369

Abstract: 基于脑电信号的表情神经解码方法，涉及神经解码领域和计算机视觉领域。包括步骤：1)从人脑神经数据中提取人脸表情信息，建立符合实际的人脸生成模型；2)利用DEAP数据集，锁定人脑神经数据的对应脑区与神经波段；3)通过LSTM模型连接脑电与人脸数据，并利用CNN模型量化出被试者的情感参数作为LSTM的初始化参数；4)利用StyleGan网络将情感参数在原始人脸的基础上进行编辑，获得非常接近原始人脸表情的生成图片。可以生成以假乱真的真实人脸，在可视化层面上跨上一步台阶。实现从神经信号直接解码表情特征的创新一步。给出从预处理到应用的全套过程，较好地利用脑科学与计算机科学交叉的优势，优化数据端的信噪比。