公开(公告)号：CN117653429A

公开(公告)日：2024-03-08

申请号：CN202311686257.2

申请日：2023-12-08

Applicant: 同济大学

Inventor： 汤奇荣 ,  马保平 ,  王文瑞 ,  李晓田 ,  阚宏伟 ,  陈锋 ,  杨浩 ,  王帅淇

IPC: A61F2/58 ,  G06V20/60 ,  G06V10/147 ,  G06V10/25 ,  G06V10/764 ,  G06V10/44 ,  G06T7/246 ,  A61F2/72

Abstract: 本发明公开了一种融合多模态信息服务于盲人的智能假肢手及其操控方法，该包括以下步骤：S1、通过SSD‑MobileNet目标检测算法进行操控对象目标检测，获取所述操控对象的边界框和语义标签；S2、基于所述边界框的信息，通过目标跟踪算法实现像素级特征对齐；S3、基于所述语义标签，通过匹配策略选择合适的操控手势；以及S4、通过融合接近觉反馈信息、肌电控制和触觉反馈信息进行视觉伺服操控。