公开(公告)号：CN112148128B

公开(公告)日：2022-11-25

申请号：CN202011109960.3

申请日：2020-10-16

Applicant: 哈尔滨工业大学

Inventor： 张展 ,  左德承 ,  冯懿 ,  封威 ,  刘宏伟 ,  舒燕君 ,  董剑 ,  罗丹彦 ,  吴桐 ,  张园博 ,  尚江卫 ,  陈思远 ,  陈新昊

IPC: G06F3/01 ,  G06V40/20 ,  G06V10/762 ,  G06V10/764 ,  G06N3/04

Abstract: 本发明提供了一种实时手势识别方法、装置、移动终端及人机交互系统，涉及手势识别技术领域，包括：获取手势数据，所述手势数据包括数据手套采集的传感器数据；对所述手势数据进行预处理，并对预处理后的手势数据进行特征提取；将所述特征提取的结果输入预训练好的分层手势识别模型进行多级手势识别，确定手势类型信息。本发明通过数据手套实时采集用户的手势数据，并对手势数据进行有效的手势分割等预处理操作，再通过构造有价值的特征信息集进行特征提取，并将提取后的特征信息输入轻量级的分层手势识别模型进行手势识别，可在保证手势识别准确度的基础上，占用更少的系统资源，适用于面向移动终端的应用场景。

公开(公告)号：CN112148128A

公开(公告)日：2020-12-29

申请号：CN202011109960.3

申请日：2020-10-16

Applicant: 哈尔滨工业大学

Inventor： 张展 ,  左德承 ,  冯懿 ,  封威 ,  刘宏伟 ,  舒燕君 ,  董剑 ,  罗丹彦 ,  吴桐 ,  张园博 ,  尚江卫 ,  陈思远 ,  陈新昊

IPC: G06F3/01 ,  G06K9/62 ,  G06N3/04

Abstract: 本发明提供了一种实时手势识别方法、装置、移动终端及人机交互系统，涉及手势识别技术领域，包括：获取手势数据，所述手势数据包括数据手套采集的传感器数据；对所述手势数据进行预处理，并对预处理后的手势数据进行特征提取；将所述特征提取的结果输入预训练好的分层手势识别模型进行多级手势识别，确定手势类型信息。本发明通过数据手套实时采集用户的手势数据，并对手势数据进行有效的手势分割等预处理操作，再通过构造有价值的特征信息集进行特征提取，并将提取后的特征信息输入轻量级的分层手势识别模型进行手势识别，可在保证手势识别准确度的基础上，占用更少的系统资源，适用于面向移动终端的应用场景。

公开(公告)号：CN112835447A

公开(公告)日：2021-05-25

申请号：CN202110093928.9

申请日：2021-01-22

Applicant: 哈尔滨工业大学

Inventor： 张展 ,  左德承 ,  刘宏伟 ,  封威 ,  冯懿 ,  王中明 ,  张园博 ,  吴桐 ,  刘强 ,  温东新 ,  董剑 ,  舒燕君 ,  罗丹彦

IPC: G06F3/01 ,  G06F1/16 ,  G06F3/0488 ,  G06F3/147 ,  G10L15/26

Abstract: 本发明提供了一种穿戴式计算机多通道人机交互方法、装置、设备及系统。所述穿戴式计算机多通道人机交互方法包括：当检测到待输出内容时，获取当前的状态数据，其中，所述状态数据包含环境类型状态和用户类型状态，所述环境类型状态和所述用户类型状态均可划分为一个或多个维度；获取所述状态数据与输出通道之间的适配关系数据；根据所述当前的状态数据，结合所述适配关系数据，确定目标输出通道；将所述待输出内容从所述目标输出通道输出。本发明可提高穿戴机人机交互效率，实现灵活自然的人机交互方式。

公开(公告)号：CN115294658B

公开(公告)日：2024-06-07

申请号：CN202211018160.X

申请日：2022-08-24

Applicant: 哈尔滨工业大学

Inventor： 张展 ,  左德承 ,  张园博 ,  封威 ,  冯懿 ,  舒燕君 ,  温东新 ,  尚宇 ,  于欣童 ,  范柳丰 ,  刘宏伟 ,  董剑

IPC: G06V40/20 ,  G06V10/82 ,  G06V10/764 ,  G06V10/26 ,  G06N3/096 ,  G06N3/0464 ,  G06N3/045 ,  G06N3/0442

Abstract: 一种面向多应用场景的个性化手势识别系统及其手势识别方法，属于人机交互技术领域。为解决手势分割不准确，无法更准确、更全面的识别手势信息的问题。本发明包括数据手套模块、移动设备模块、边缘设备模块、应用设备模块，数据手套模块连接移动设备模块，移动设备模块分别连接边缘设备模块、应用设备模块；数据手套模块为具有拉伸传感器和运动传感器的智能手套，智能手套通过拉伸传感器和运动传感器采集手势的运动信息和手指的弯曲信息，通过蓝牙发送至移动设备模块；移动设备模块用于进行手势识别、数据传输；边缘设备模块用于进行数据存储、模型训练、模型迁移、数据分析；应用设备模块为带有控制接口的智能设备。本发明准确性高。

公开(公告)号：CN115294658A

公开(公告)日：2022-11-04

申请号：CN202211018160.X

申请日：2022-08-24

Applicant: 哈尔滨工业大学

Inventor： 张展 ,  左德承 ,  张园博 ,  封威 ,  冯懿 ,  舒燕君 ,  温东新 ,  尚宇 ,  于欣童 ,  范柳丰 ,  刘宏伟 ,  董剑

IPC: G06V40/20 ,  G06V10/82 ,  G06V10/764 ,  G06V10/26 ,  G06N3/08 ,  G06N3/04

Abstract: 一种面向多应用场景的个性化手势识别系统及其手势识别方法，属于人机交互技术领域。为解决手势分割不准确，无法更准确、更全面的识别手势信息的问题。本发明包括数据手套模块、移动设备模块、边缘设备模块、应用设备模块，数据手套模块连接移动设备模块，移动设备模块分别连接边缘设备模块、应用设备模块；数据手套模块为具有拉伸传感器和运动传感器的智能手套，智能手套通过拉伸传感器和运动传感器采集手势的运动信息和手指的弯曲信息，通过蓝牙发送至移动设备模块；移动设备模块用于进行手势识别、数据传输；边缘设备模块用于进行数据存储、模型训练、模型迁移、数据分析；应用设备模块为带有控制接口的智能设备。本发明准确性高。