公开(公告)号：CN117351074B

公开(公告)日：2024-06-11

申请号：CN202311115470.8

申请日：2023-08-31

Applicant: 中国科学院软件研究所

Inventor： 姚乃明 ,  卢俊彦 ,  郭雯丽 ,  陈辉 ,  王宏安

IPC: G06T7/73 ,  G02B27/00 ,  G06T7/80 ,  G06V10/762

Abstract: 本发明公开了一种基于头戴式眼动仪和深度相机的视点位置检测方法及装置，涉及人机交互技术领域与视线操控的相关技术领域。对头戴式眼动仪的前景相机和深度相机进行标定，获得内参矩阵和外参矩阵；利用深度相机对显示屏角点进行精确定位；根据深度相机的内参矩阵和外参矩阵，将深度相机坐标系的显示屏角点转换到世界坐标系中；根据前景相机的内参矩阵和显示屏角点坐标，将前景相机上的视点坐标转换为世界坐标系中，再转换到显示屏坐标系中，得到在显示屏中的视点位置；对连续的视点位置进行滤波，得到稳定的视点位置。本发明能够实时获得用户在显示屏坐标系下的视点位置，缩短注视时间，实现跨屏交互，提升视线交互的智能性和操控效率。

公开(公告)号：CN117351074A

公开(公告)日：2024-01-05

申请号：CN202311115470.8

申请日：2023-08-31

Applicant: 中国科学院软件研究所

Inventor： 姚乃明 ,  卢俊彦 ,  郭雯丽 ,  陈辉 ,  王宏安

IPC: G06T7/73 ,  G02B27/00 ,  G06T7/80 ,  G06V10/762

Abstract: 本发明公开了一种基于头戴式眼动仪和深度相机的视点位置检测方法及装置，涉及人机交互技术领域与视线操控的相关技术领域。对头戴式眼动仪的前景相机和深度相机进行标定，获得内参矩阵和外参矩阵；利用深度相机对显示屏角点进行精确定位；根据深度相机的内参矩阵和外参矩阵，将深度相机坐标系的显示屏角点转换到世界坐标系中；根据前景相机的内参矩阵和显示屏角点坐标，将前景相机上的视点坐标转换为世界坐标系中，再转换到显示屏坐标系中，得到在显示屏中的视点位置；对连续的视点位置进行滤波，得到稳定的视点位置。本发明能够实时获得用户在显示屏坐标系下的视点位置，缩短注视时间，实现跨屏交互，提升视线交互的智能性和操控效率。