公开(公告)号：CN119399828A

公开(公告)日：2025-02-07

申请号：CN202411279277.2

申请日：2024-09-12

Applicant: 中国科学院苏州生物医学工程技术研究所

Inventor： 郭凯 ,  吴煜雯 ,  王杰 ,  许方鸣

IPC: G06V40/20 ,  G06V10/40 ,  G06V10/764 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0499 ,  G06N3/045 ,  G06N3/084

Abstract: 本发明公开了一种基于多模态融合的人体步态识别方法以及装置，属于人体步态评估领域，包括采集下肢不同运动位置的肌肉的肌电信号；采集脑部在步态图像和空闲状态下的近红外脑功能成像数据；采集运动过程中足底的压力信息；将肌电信号、近红外脑功能成像数据以及足底压力信息输入多模态融合模型，分别对肌电信号、近红外脑功能成像数据以及足底压力信息进行特征提取，采用交叉注意力机制将不同特征进行融合；分类算法对融合后的特征进行识别并进行步态评估，由于肌电信号、足底的压力信息以及近红外脑功能成像数据与人体运动同步产生，通过上述数据识别人体步态滞后性低、准确度高。

公开(公告)号：CN120010656A

公开(公告)日：2025-05-16

申请号：CN202411939682.2

申请日：2024-12-26

Applicant: 中国科学院苏州生物医学工程技术研究所

Inventor： 郭凯 ,  魏野 ,  吴煜雯 ,  马哈茂德·艾尔萨曼缇 ,  王杰 ,  罗先佰 ,  许方鸣 ,  李广泽 ,  王灿

IPC: G06F3/01 ,  G06F18/241 ,  G06F18/25 ,  G06F18/10 ,  G06F18/214 ,  G06N3/08

Abstract: 本发明提供基于入耳式可穿戴设备的绘画辅助交互方法及系统、设备、介质，包括步骤：获取脑电信号；对脑电信号进行分类，得到基于脑电信号解析的脑电指令；获取耳朵附近的面部肌肉和下颚运动信息、以及头部和颈部的运动信息；通过面部肌肉和下颚运动信息、以及头部和颈部的运动信息解析不同发音的口型信息；将脑电指令与口型信息融合，决策出最终的用户指令。本发明克服了传统绘画切换操作的不便捷问题，利用入耳式可穿戴设备上配置的脑电电极、近红外传感器和陀螺仪，解析用户的意图操作，直接实现绘画工具选项的顺滑切换。本发明提供的方案不再需要手动一步步选择的冗余操作，低延迟，操作自然，支撑用户专注于创作本身，提升创作效率。

公开(公告)号：CN119964572A

公开(公告)日：2025-05-09

申请号：CN202411971622.9

申请日：2024-12-30

Applicant: 中国科学院苏州生物医学工程技术研究所

Inventor： 郭凯 ,  吴煜雯 ,  马哈茂德·艾尔萨曼缇 ,  罗先佰 ,  许方鸣 ,  李广泽 ,  王杰 ,  张宇泽

IPC: G10L15/25 ,  G10L15/18 ,  G06V40/16 ,  G06V10/25 ,  G06V10/62 ,  G06V10/82 ,  G06T7/269 ,  G06N3/0455

Abstract: 本发明公开了一种基于人类嘴部运动的语言识别方法以及装置，属于语言识别领域，通过采集用户嘴部运动过程中的面部和颈部的肌肉活动的电信号以及嘴部运动过程中面部图像；对肌电信号以及面部图像进行特征提取，将肌电信号特征与面部运动特征进行多模态融合，构建联合特征向量，捕捉静默语音的肌肉活动与口部动作之间的内在关联；基于Transformer网络构建多模态静默语音识别模型，识别对应的语音内容；基于NLP的模糊语言处理，生成完整的句子输出，通过上述步骤，本发明基于人类嘴部运动的语言识别方法能够识别静默方式表达的语音，避免环境干扰，有利于发音障碍人群使用，有利于通信的保密性。

公开(公告)号：CN119453928A

公开(公告)日：2025-02-18

申请号：CN202411530403.7

申请日：2024-10-30

Applicant: 中国科学院苏州生物医学工程技术研究所

Inventor： 郭凯 ,  王灿 ,  吴煜雯 ,  许方鸣

IPC: A61B5/00 ,  A61B5/113

Abstract: 本发明提供体表呼吸运动模拟装置及基于双目视觉的靶点监测系统，体表呼吸运动模拟装置的结构简单，将胸腹体表简单分为四块，通过控制四个胸腹体表模拟板的往复运动，模拟人体腹式呼吸和胸式呼吸时胸腹体表的运动。该装置使用刚性构件，并且使用丝杆步进电机直接驱动胸腹体表模拟板运动，具有更强的可重复性，其运动精度高，运动控制能力更好，控制更简单，整个系统的成本也较低。该监测系统可以对放置的体表靶点实时测距并绘制靶点实时位移曲线，将体表呼吸运动模拟装置与该系统结合后，该系统可以监测体表呼吸运动模拟装置的运动状态，若不满足要求可以更改驱动板中的代码修正胸腹体表模拟板的运动，这增加了体表呼吸运动模拟装置的可靠性。

公开(公告)号：CN119157524A

公开(公告)日：2024-12-20

申请号：CN202411669367.2

申请日：2024-11-21

Applicant: 中国科学院苏州生物医学工程技术研究所

Inventor： 郭凯 ,  张宇泽 ,  王杰 ,  许方鸣 ,  李广泽 ,  罗先佰 ,  陈远凯

IPC: A61B5/107 ,  G16H20/40 ,  A61B5/11 ,  A61B5/00

Abstract: 本申请公开了感知手套，属于康复器械领域，多个限位块分别固定于多个手指部，每一绳索安装于限位块，感知组件的数量与绳索的数量相同，每一感知组件的齿条滑动安装于底座，齿条与绳索固定，齿轮与齿条啮合，编码器与齿轮连接，编码器通过齿轮以及齿条获取绳索的移动距离以获取手指部弯曲角度，陀螺仪测量手套的姿态，处理器根据弯曲角度以及姿态判断手指部的位置，当手指部达到预设位置时，限位组件限制齿条移动以限制手指部活动，本申请能够将手指的机械运动通过旋转编码器和陀螺仪转换为数字信号，形成训练数据，以便于调整康复训练方案；当手指部达到预设位置时，限制手指部活动形成力的反馈将虚拟场景抓握物体的感觉传递给人体的手指。