公开(公告)号：CN117420908A

公开(公告)日：2024-01-19

申请号：CN202311353598.8

申请日：2023-10-19

Applicant: 重庆邮电大学

Inventor： 邓欣 ,  魏世委 ,  秦红星 ,  霍华翔 ,  李晨辉 ,  徐代江

IPC: G06F3/01 ,  A61B5/378 ,  A61B5/372 ,  A61B5/398 ,  A61B5/00 ,  G06N3/0442 ,  G06N3/0464

Abstract: 本发明属于大脑脑机接口领域，具体涉及一种基于神经网络的人类大脑活动解码方法及系统；该方法包括：获取图像特征向量并将其输入到预训练的图像生成器得到刺激图像；采集用户观察刺激图像产生的脑电信号和眼电信号；对脑电信号和眼电信号进行预处理，得到预处理好的脑电信号；采用预训练的脑电信号编码网络对脑电信号进行特征编码，得到初级脑电特征；根据初级脑电特征得到脑电信号分类结果；采用预训练的映射网络对初级脑电特征进行处理，得到预测电脑特征；将预测脑电特征输入到预训练的图像生成器中进行处理，得到重建图像；本发明可根据大脑的反应来重建视觉刺激的内容，实现图像‑脑电图‑图像的变换。

公开(公告)号：CN117011411A

公开(公告)日：2023-11-07

申请号：CN202311111965.3

申请日：2023-08-31

Applicant: 重庆邮电大学

Inventor： 邓欣 ,  包飞扬 ,  刘柯 ,  方阳 ,  魏世委 ,  李晨辉 ,  徐代江

IPC: G06T11/00 ,  G06V10/77 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明属于脑机接口视觉图像重建领域，具体涉及一种基于解码人脑活动的深度图像重建方法及系统，方法包括用图像对检测对象进行视觉刺激并获取功能磁共振成像数据，对功能磁共振数据进行预处理得到体素数据；通过特征解码器解码体素数据，得到第一底层信息特征和第一高级语义特征；通过特征提取器获取图像的第二底层信息特征和第二高级语义特征；两个底层信息特征形成第一特征对，两个高级语义特征形成第二特征对；将第一特征对与第二特征对输入特征优化器得到最佳底层信息特征和最佳高级语义特征；融合最佳底层信息特征和最佳高级语义特征并输入复合生成器得到重建图像；本发明提出的方法提高了对整体特征的优化效果从而提高图像的重建质量。