基于稠密地图语义分割的混合现实眼动交互系统及方法

    公开(公告)号:CN119576126A

    公开(公告)日:2025-03-07

    申请号:CN202411610698.9

    申请日:2024-11-12

    Abstract: 一种基于稠密地图语义分割的混合现实眼动交互系统及方法,涉及人机交互领域,包括集成通信模块、混合现实显示模块、眼动追踪模块和三维环境感知模块的头戴式设备;三维环境感知模块获取周围环境的图像和深度数据并进行三维重建获得稠密地图,将稠密地图分割为不同区块,对区块的语义信息进行标注;眼动追踪模块沿注视方向向稠密地图中发射射线,以该射线与稠密地图的碰撞点位置的实物信息确定注视目标;通信模块根据注视目标和实物信息的标注,与注视目标的实物物体进行通信;眼动追踪模块根据眼球动作和预设操控规则,获得操控指令,并将操控指令发送给注视目标的实物物体。解决现有混合现实场景中无法与实物进行自然眼动交互导致的沉浸感不足的问题。

    一种基于超声触觉和空间想象的混合脑机接口系统

    公开(公告)号:CN117950495A

    公开(公告)日:2024-04-30

    申请号:CN202311583621.2

    申请日:2023-11-24

    Abstract: 一种基于超声触觉和空间想象的混合脑机接口系统,包括超声触觉相控阵、脑电帽、脑电信号检测板和主控计算机;在超声触觉相控阵任务模块构建输入指令、触觉感知指令和输出指令的对应关系,使用时频域编码方法生成触觉感知指令。超声触觉相控阵根据触觉感知指令的次序依次发射多路超声波聚焦到人的手上,并构建不同的形状,使人手可以感知不同的形状和触觉特性,并诱发空间想象。脑电帽定位采集大脑感应触觉和产生空间想象位置的脑电信号,传给脑电信号检测板。主控计算机接收生物电信号,对原始生物电信号进行通道分离、滤波去噪处理、智能解码,依次产生输出指令。本发明的系统可用输出指令操控无人装备,亦可对人的认知能力进行训练和提升。

Patent Agency Ranking