公开(公告)号：CN111325124B

公开(公告)日：2023-05-12

申请号：CN202010087681.5

申请日：2020-02-05

Applicant: 上海交通大学

Inventor： 卞琛毓 ,  肖双九

IPC: G06V20/40

Abstract: 一种虚拟场景下的实时人机交互系统，包括：用于突变检测的视觉注意区域预测模块和基于视觉注意区域特征的行为预测模块，其中：视觉注意区域预测模块接受输入视频帧序列并依次进行目标信息检测、平滑运动检测以及突变信息检测并得到视觉显著图，对视觉显著图进行视觉注意区域提取得到注意区域图；行为预测模块对用户视觉区域与视频内容进行特征后利用特征对用户行为进行预测。本发明通过输入用户观测到的视频内容，预测用户观测到视频后的反馈行为，能够在场景中存在突变的情况下能够较好地运行同时也能够应对平滑变化的场景。

公开(公告)号：CN111325124A

公开(公告)日：2020-06-23

申请号：CN202010087681.5

申请日：2020-02-05

Applicant: 上海交通大学

Inventor： 卞琛毓 ,  肖双九

IPC: G06K9/00

Abstract: 一种虚拟场景下的实时人机交互系统，包括：用于突变检测的视觉注意区域预测模块和基于视觉注意区域特征的行为预测模块，其中：视觉注意区域预测模块接受输入视频帧序列并依次进行目标信息检测、平滑运动检测以及突变信息检测并得到视觉显著图，对视觉显著图进行视觉注意区域提取得到注意区域图；行为预测模块对用户视觉区域与视频内容进行特征后利用特征对用户行为进行预测。本发明通过输入用户观测到的视频内容，预测用户观测到视频后的反馈行为，能够在场景中存在突变的情况下能够较好地运行同时也能够应对平滑变化的场景。