-
公开(公告)号:CN117312992B
公开(公告)日:2024-03-12
申请号:CN202311618738.X
申请日:2023-11-30
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)
IPC: G06F18/2415 , G06F18/2431 , G06F18/25 , G06T7/80 , G06V40/16 , G06V10/80 , G10L25/03 , G10L25/30 , G10L25/63
Abstract: 本发明公开了一种多视角人脸特征与音频特征融合的情绪识别方法及系统,所述方法包括:获取用于捕获目标对象在不同视角的人脸图像的所有相机之间的位置关系,根据所述位置关系对所有所述相机进行校准;接收所有所述相机发送的所述目标对象在不同视角的人脸图像,并对所有所述人脸图像进行特征提取和融合,得到最终视觉特征;接收所述目标对象发出的音频信号,并根据所述音频信号得到音频特征,将所述最终视觉特征和所述音频特征进行融合得到最终融合特征,根据所述最终融合特征识别得到所述目标对象的情绪识别结果。本发明通过对相机进行标定,提供更加真实和全面的人脸图像,更全面地理解和分析用户的面部表情,提高情绪识别的准确性和可靠性。
-
公开(公告)号:CN117322879A
公开(公告)日:2024-01-02
申请号:CN202311189806.5
申请日:2023-09-14
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) , 交浦科技(深圳)有限公司
Abstract: 本发明公开了一种孤独症儿童的单一兴趣行为检测系统,包括:测试区域、设置该区域的测试道具、视觉采集装置、语音采集装置和终端;视觉采集装置的视觉范围至少覆盖测试道具所在区域,用于采集图像信息;语音采集装置用于采集语音信息;终端与视觉采集装置和语音采集装置通讯;终端至少包括:存储数据的数据存储模块和算法分析模块,其被配置为:利用物体检测算法、手部骨架点检测算法、视线估计算法对图像信息进行处理,分析受试者在不同的单一兴趣行为下的状态、所述测试道具的状态和受试者的注意力,判定是否满足单一兴趣条件,输出检测结果。本发明还公开了利用上述检测系统进行检测的方法。
-
公开(公告)号:CN116434150B
公开(公告)日:2023-12-05
申请号:CN202310703363.0
申请日:2023-06-14
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)
Abstract: 本发明提供了一种面向拥挤场景的多目标检测跟踪方法、系统及存储介质,多目标检测跟踪方法包括如下步骤:步骤1:将视频帧序列输入目标检测器,获得逐帧检测结果,逐帧检测结果包括检测框和偏移,检测框包括初始身体框和头部框,利用头部框和偏移对初始身体框进行补充得到身体框;步骤2:将所有身体框输入运动特征提取模块,获得所有行人的运动特征;将所有身体框和头部框输入外观特征提取模块,获得所有身体框和头部框的外观特征向量,并将来自同一行人的头部外观特征向量和身体外观特征向量进行拼接得到行人的外观特征。本发明的有益效果是:本发明提高了检测精度,提高了拥挤场景中移动目标运动估计的准确性。
-
公开(公告)号:CN119851943A
公开(公告)日:2025-04-18
申请号:CN202411928171.0
申请日:2024-12-25
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) , 世迈嘉医疗科技(丽水)有限公司
Abstract: 本发明涉及数据处理技术领域,公开了一种基于注意力的社交认知评估方法、系统、终端及可读存储介质,所述方法包括:引导用户做出多个社交认知选择,采集每个社交认知选择过程中的视频数据流和选择数据;根据所述选择数据和所述视频数据流,计算系统性指标和注意力指标;根据所述系统性指标和注意力指标,生成社交认知的评估结果。本发明通过采集用户在每个认知选择过程中的视频,根据视频进行分析,判断用户在作出选择时,注意力是否集中在应该集中的地方,从而对用户在认知选择过程中的注意力情况进行分析,辅以选择数据对用户的社交认知能力作出判断。
-
公开(公告)号:CN119745656A
公开(公告)日:2025-04-04
申请号:CN202510159289.X
申请日:2025-02-13
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) , 交浦科技(深圳)有限公司
Abstract: 本申请公开了一种等速多体位康复外骨骼模块、机器人及控制方法,所述等速多体位康复外骨骼模块包括分别连接在骨骼基座上的驱动组件、大腿机构和小腿机构,大腿机构与小腿机构连接,大腿机构和小腿机构分别连接驱动组件;大腿机构包括大腿衔接组件和大腿绑缚件,大腿衔接组件与骨骼基座转动连接,驱动组件与大腿衔接组件连接,大腿绑缚件设置在大腿衔接组件上,大腿绑缚件被穿戴在用户的大腿上;小腿机构包括小腿衔接组件和小腿绑缚件,小腿衔接组件与骨骼基座转动连接,驱动组件与小腿衔接组件连接,小腿绑缚件设置在小腿衔接组件上,小腿绑缚件被穿戴在用户的小腿上。本申请能够实现多关节的等速肌力训练,提高运动康复效率与肌力评估的精度。
-
公开(公告)号:CN118356596B
公开(公告)日:2025-02-11
申请号:CN202410342413.1
申请日:2024-03-25
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)
Abstract: 本发明公开了一种基于A型超声信号的超声聚焦导航方法及相关设备,所述方法包括:获取聚焦电信号和感知电信号,分别进行放大处理得到聚焦激励电信号和感知激励电信号,分别进行转化处理得到聚焦超声波和A型超声信号;当将聚焦超声波和A型超声信号发射至目标人体组织时得到对应的第一回波信号和第二回波信号,分别进行预处理得到聚焦位置信息及波形曲线信息;根据波形曲线信息得到形态学信息,并根据形态学信息和聚焦位置信息调整得到目标聚焦区域。本发明通过使用A型超声信号检测肌肉形态信息,以调整超声探头的位置和相控阵的相位,实现对焦点位置的优化调整,从而实现更精确而有效的聚焦刺激,并且适应更加多样化的使用场景。
-
公开(公告)号:CN118379485B
公开(公告)日:2025-01-28
申请号:CN202410807749.0
申请日:2024-06-21
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)
IPC: G06V10/25 , G06V10/82 , G06N3/0464 , G06N3/084 , G06N3/0455 , G06V20/64 , G06V10/766
Abstract: 本发明公开了一种基于多模态协同的3D多目标跟踪方法,方法包括:将当前获取的3D点云序列输入3D目标检测器、图像序列输入2D目标检测器,分别获得3D检测框和2D检测框并输入多模态位置优化器,利用基于图像语义信息的2D检测框调整对应物体的3D检测框,获得增强3D坐标框投影到对应的相机平面获得相应区域,并利用外观特征提取器获得物体对应的当前外观特征;利用轨迹管理模块存储外观特征和运动特征并进行更新,具体为:将当前外观特征、增强3D坐标框与历史轨迹外观特征和运动特征进行相似度匹配;根据匹配结果进行外观特征和运动特征的更新;更新完成后的轨迹管理模块输出跟踪结果。本发明方法提高了3D多目标跟踪效果。
-
公开(公告)号:CN118606800B
公开(公告)日:2025-01-14
申请号:CN202411087787.X
申请日:2024-08-09
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) , 交浦科技(深圳)有限公司
IPC: G06F18/241 , B25J9/16 , B25J13/08 , G06F18/213 , G06F18/25 , G06N3/045 , G06N3/042 , G06N3/0464 , G06N3/049 , G06N3/084 , G06N3/09 , G06N5/045
Abstract: 本发明公开了一种基于生物可解释性的触觉纹理识别方法、系统及终端,所述方法包括:根据生物传感器的分布信息构建触觉传感器,并采集触觉数据;将触觉数据进行预处理,得到期望稀疏脉冲信号和目标稀疏脉冲信号,并输入所述脉冲神经网络模型进行迭代反向训练,优化脉冲神经网络模型;将任务触觉数据转换为任务稀疏脉冲信号后输入到脉冲神经网络模型正向传播,输出识别结果。本发明通过自适应图拓扑卷积核对多通道触觉数据进行特征提取,得到带有不同标签的脉冲信号,并根据两者的差别以及预设监督学习规则训练脉冲神经网络模型,对脉冲神经网络模型的权重参数进行迭代收敛,最终以便捷、高效的方式得到用于触觉纹理识别任务的网络模型。
-
公开(公告)号:CN119188781A
公开(公告)日:2024-12-27
申请号:CN202411668141.0
申请日:2024-11-21
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)
Abstract: 本发明公开了一种基于仿生触觉手指的多模态仿生触觉感知方法及系统,所述方法包括:获取仿生触觉手指产生的电荷信号,对电荷信号进行预处理得到压电数字信号;获取仿生触觉手指拍摄的图像序列,对图像序列进行信号处理得到视触觉信号;对压电数字信号和视触觉信号进行融合处理,得到时空触觉信号,对时空触觉信号分别进行表面三维重建和频谱分析,得到多模态触觉信息。本发明基于手指仿生特征,集成压电传感器和视触觉传感器,设计仿生触觉手指,在时间和空间维度上进行了数据融合,实现多模态触觉感知能力,通过结构仿生和功能仿生,使得机器人触觉获得不同时空下不同振动刺激的识别和定位能力。
-
公开(公告)号:CN118592983A
公开(公告)日:2024-09-06
申请号:CN202411088742.4
申请日:2024-08-09
Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) , 交浦科技(深圳)有限公司
Abstract: 本发明涉及健康监测技术领域,公开了一种基于肌电信号和血氧浓度的肌肉疲劳监测方法及系统,所述方法包括:获取被监测者的肌电信号和血红蛋白浓度;根据所述肌电信号计算肌电疲劳因子,根据所述血红蛋白浓度计算血氧疲劳因子;根据所述肌电疲劳因子和所述血氧疲劳因子输出被监测者的肌肉疲劳情况。本发明通过引入血氧变化与肌电相结合,结合肌电信号和血红蛋白浓度对于疲劳的反应,利用肌电信号捕捉肌肉活动的电生理变化,能够精准反映肌肉的收缩、松弛及疲劳状态,氧合血红蛋白和脱氧血红蛋白浓度变化,提供详细的细胞代谢信息,包括肌肉在不同训练强度下的氧供需状况,提供了准确度高的实时肌肉疲劳监测的方法。
-
-
-
-
-
-
-
-
-