公开(公告)号：CN117137429A

公开(公告)日：2023-12-01

申请号：CN202310760589.4

申请日：2023-06-26

Applicant: 上海理工大学

Inventor： 何宏 ,  李坤昊

IPC: A61B3/113 ,  G06T7/00 ,  G06T7/246 ,  G06V40/18 ,  G06V40/16 ,  G06V40/60 ,  G06V10/25 ,  G06V10/62 ,  G06F3/01 ,  A61B3/14 ,  A61B3/02

Abstract: 本申请公开了一种眼部疼痛智能识别的人机交互系统及方法，包括采集患者面部图像及深度数据的采集模块、处理模块和交互模块；所述采集模块包括深度相机；所述处理模块包括处理器、双模态眼球疼痛识别功能模块和瞳孔运动轨迹识别功能模块；所述交互模块包括与患者交互的显示器和语音交互子模块；系统通过语音交互子模块发出眼部动作引导指令，瞳孔运动轨迹识别功能模块判断患者所做眼球运动是否符合要求；系统通过语音交互子模块发出双模态眼球疼痛问题询问，双模态眼球疼痛识别功能模块识别患者头部动作，反馈输出眼球疼痛及球后疼痛两项指标。相对于人工检测、AI检测，具有更高的客观性、实时性、准确性、效率高。

公开(公告)号：CN118695064A

公开(公告)日：2024-09-24

申请号：CN202410686846.9

申请日：2024-05-30

Applicant: 上海理工大学

Inventor： 何宏 ,  李坤昊

IPC: H04N23/50 ,  H04N23/68 ,  H04N23/695 ,  H04N23/84 ,  A61B5/00 ,  G06T7/00

Abstract: 本发明公开了一种防震动低摩擦的连续多角度自动面部拍摄系统，包含面部校准模块、连续拍摄模块、核心处理模块。连续拍摄模块包含弧形凸槽挂靠式三轮滑动系统和多角度连续自动面部拍摄算法，弧形凸槽挂靠式三轮滑动系统由弧形凸槽轨道和挂靠式三轮轨道运行机构组成，通过多角度连续自动面部拍摄算法控制搭载了深度相机的轨道运行机构在凸槽轨道上移动，并实现对患者面部的连续自动拍摄；面部校准模块则根据深度相机画面结合面部校准算法控制校准轨道运行机构，使得患者面部始终保持在画面中心；核心处理模块为设备中各算法的正确实现提供算力及内存支持，并展示连续拍摄结果。

公开(公告)号：CN116228625A

公开(公告)日：2023-06-06

申请号：CN202211331303.2

申请日：2022-10-28

Applicant: 上海理工大学

Inventor： 何宏 ,  李坤昊 ,  陈家毓

IPC: G06T7/00 ,  G06T7/11 ,  G06V10/764 ,  G16H40/60 ,  G06N3/08 ,  G06N3/04 ,  A61B5/11 ,  A61B5/107 ,  A61B5/00

Abstract: 本发明涉及一种患者面部细节自动扫描装置及方法，该装置包括面部位置校准模块、面部图像扫描模块、面部成像模块和中央控制模块。面部位置校准模块包括垂直轨道、垂直升降滑块和患者交互屏幕，通过中央控制模块算法实现患者身高体型不同的自适应调整；面部扫描模块包括补光灯、摄像头和圆弧滑轨，通过摄像头移动中对患者面部的多角度拍摄，对面部图像特征扫描；面部成像模块收到图像后通过中央控制模块的3D人脸重建算法将获得的多角度图像进行合成，生成高精度、多细节的患者面部数字孪生模型并展示；中央控制模块包括核心处理器和散热风扇组。解决了需要根据患者身高体型的不同自适应定位患者的面部位置，并对面部特征高精度稳定捕捉的问题。