公开(公告)号：CN118295533A

公开(公告)日：2024-07-05

申请号：CN202410467650.0

申请日：2024-04-18

Applicant: 厦门大学

Inventor： 郭伟杰 ,  林晓琳 ,  林丽婉 ,  吕毅军 ,  陈忠

IPC: G06F3/01 ,  G06V40/18 ,  G06V20/50 ,  G06V10/28 ,  G06V10/44 ,  G06V10/82 ,  G06F18/21 ,  G06F18/213 ,  G06F18/27 ,  G06V10/766

Abstract: 本发明提出一种面向AR眼镜的SSVEP脑机接口与眼动追踪跨模态融合感知方法及系统，包括：通过外部拍摄装置捕捉和采集场景的图像信息，将图像信息传输至桌面端进行目标识别；对识别的目标对象覆盖频率刺激的SSVEP信号，并以闪烁的形式将刺激信息传送至预设的AR显示界面；通过眼动追踪模块监测用户的注视点，判断注视点是否在目标识别的预测框内，若在则进一步判断注视点是否与SSVEP频谱识别结果相对应；若眼动追踪模块与SSVEP识别模块两种方式识别的结果为同一目标，则将选择的目标对象输出至操作端。本发明使用AR显示的实时的SSVEP刺激界面，允许用户转变视角去选择要进行操作的目标物体，使系统的可用性更高。