公开(公告)号：CN118295533A

公开(公告)日：2024-07-05

申请号：CN202410467650.0

申请日：2024-04-18

Applicant: 厦门大学

Inventor： 郭伟杰 ,  林晓琳 ,  林丽婉 ,  吕毅军 ,  陈忠

IPC: G06F3/01 ,  G06V40/18 ,  G06V20/50 ,  G06V10/28 ,  G06V10/44 ,  G06V10/82 ,  G06F18/21 ,  G06F18/213 ,  G06F18/27 ,  G06V10/766

Abstract: 本发明提出一种面向AR眼镜的SSVEP脑机接口与眼动追踪跨模态融合感知方法及系统，包括：通过外部拍摄装置捕捉和采集场景的图像信息，将图像信息传输至桌面端进行目标识别；对识别的目标对象覆盖频率刺激的SSVEP信号，并以闪烁的形式将刺激信息传送至预设的AR显示界面；通过眼动追踪模块监测用户的注视点，判断注视点是否在目标识别的预测框内，若在则进一步判断注视点是否与SSVEP频谱识别结果相对应；若眼动追踪模块与SSVEP识别模块两种方式识别的结果为同一目标，则将选择的目标对象输出至操作端。本发明使用AR显示的实时的SSVEP刺激界面，允许用户转变视角去选择要进行操作的目标物体，使系统的可用性更高。

公开(公告)号：CN117215053A

公开(公告)日：2023-12-12

申请号：CN202311165669.1

申请日：2023-09-11

Applicant: 厦门大学

Inventor： 郭伟杰 ,  吴宗宇 ,  李光耀 ,  林晓琳 ,  林仁辉 ,  吕毅军 ,  陈忠

IPC: G02B27/00 ,  G06V40/18 ,  G06V40/19 ,  H04N23/20 ,  H04N23/611 ,  H04M1/72412

Abstract: 本发明主要涉及一款基于手机的眼动仪的创新技术，该装置使用OV2640红外摄像头、32位微处理器模块和安卓手机等设备实现。该装置主要通过OV2640红外摄像头捕捉用户眼睛图像处理得到眼动向量，再通过眼动向量映射到可见光摄像头中的图片对用户正在观看的目标进行实时追踪。用户完成设备校准后通过穿戴单目便携式眼动追踪装置能自由移动且实现WI FI覆盖范围内的远程眼动追踪。设备主要分为两部分，第一部分是眼镜部分，实现图像预处理和无线远程传输。第二部分是图像处理终端的手机app，通过眼镜上的无线WiFi模块将图像送到手机端进行处理并输出用户注视点图像。用户像佩戴普通眼镜一样佩戴该眼动仪，只需打开手机热点和手机app，即可连上眼动仪设备实现眼动追踪。

公开(公告)号：CN116452530A

公开(公告)日：2023-07-18

申请号：CN202310367495.0

申请日：2023-04-07

Applicant: 厦门大学

Inventor： 郭伟杰 ,  吴宗宇 ,  李光耀 ,  林晓琳 ,  林仁辉 ,  吕毅军 ,  陈忠

IPC: G06T7/00 ,  G06T7/13 ,  G06N3/0464 ,  G06N3/08

Abstract: 本申请涉及一种眼动追踪方法及眼动追踪装置，所述方法通过搭建人眼眼动追踪系统，实时采集人眼的注视点，计算出人们在观察一个事物的注视点的轨迹图和热点图。据此结果，用于评估出人们在浏览外界事物时的注意力的重点和感兴趣的关键部分。该项发明，不仅可以用于产品设计风格的改善和调整，更加适应大众的主观感受和吸引观众的眼球。同时，该发明也可以用于人们情绪，疲劳状态的评估和医学上神经领域情感障碍的临床治疗。