公开(公告)号：CN118605736A

公开(公告)日：2024-09-06

申请号：CN202411089776.5

申请日：2024-08-09

Applicant: 厦门理工学院

Inventor： 任刚 ,  王刚 ,  林文硕 ,  黄志煌 ,  朱雅宁

IPC: G06F3/01 ,  G06V10/764 ,  G06V10/82 ,  G06N3/0464 ,  G10L21/0208 ,  G10L25/24 ,  G10L25/30 ,  G10L25/51 ,  G10L15/26

Abstract: 本发明公开了一种听障外卖员使用的人机交互头戴式设备及其控制方法，所述设备包括：头戴式设备主体、第一摄像头、第二摄像头、麦克风阵列、控制器、透明显示屏；所述方法包括：通过所述第一摄像头和第二摄像头获取环境图像，根据环境图像识别得到当前所处的第一场景类别；通过所述麦克风阵列获取环境声音，根据环境声音识别得到当前所处的第二场景类别；比较当前第一场景类别和第二场景类别，所述第一场景类别和第二场景类别为骑行场景、步行场景、交流场景其中的一种，若所述第一场景类别和第二场景类别相同，则将环境图像和环境声音转换为对应的场景类别的人机交互提示。

公开(公告)号：CN118605736B

公开(公告)日：2024-11-05

申请号：CN202411089776.5

申请日：2024-08-09

Applicant: 厦门理工学院

Inventor： 任刚 ,  王刚 ,  林文硕 ,  黄志煌 ,  朱雅宁

IPC: G06F3/01 ,  G06V10/764 ,  G06V10/82 ,  G06N3/0464 ,  G10L21/0208 ,  G10L25/24 ,  G10L25/30 ,  G10L25/51 ,  G10L15/26

Abstract: 本发明公开了一种听障外卖员使用的人机交互头戴式设备及其控制方法，所述设备包括：头戴式设备主体、第一摄像头、第二摄像头、麦克风阵列、控制器、透明显示屏；所述方法包括：通过所述第一摄像头和第二摄像头获取环境图像，根据环境图像识别得到当前所处的第一场景类别；通过所述麦克风阵列获取环境声音，根据环境声音识别得到当前所处的第二场景类别；比较当前第一场景类别和第二场景类别，所述第一场景类别和第二场景类别为骑行场景、步行场景、交流场景其中的一种，若所述第一场景类别和第二场景类别相同，则将环境图像和环境声音转换为对应的场景类别的人机交互提示。