-
公开(公告)号:CN110166850B
公开(公告)日:2020-11-06
申请号:CN201910465138.1
申请日:2019-05-30
Applicant: 上海交通大学
Abstract: 本发明提供一种多重CNN网络预测全景视频观看位置的方法和系统,其中:基于前一段时间的观看轨迹,运用神经网络方法预测出下一时刻的观看点;将要预测时刻的全景视频帧映射成多个方向上的小视频帧,每个小视频帧通过第一个卷积神经网络CNN得到相应的显著图,将所述显著图合并成整个的视频帧的显著图,再将所述整个的视频帧的显著图通过第二个卷积神经网络CNN进行精炼得到全景视频帧显著图;将预测的所述观看点和所述全景视频帧显著图输入到全连接网络,得到最终的预测点即全景视频观看位置点。本发明综合考虑了观看视频时的时间连续性和全景视频的映射失真问题,并将两者结合起来得到最终的最优预测点,因而能够实现较高的预测准确率。
-
公开(公告)号:CN110166850A
公开(公告)日:2019-08-23
申请号:CN201910465138.1
申请日:2019-05-30
Applicant: 上海交通大学
Abstract: 本发明提供一种多重CNN网络预测全景视频观看位置的方法和系统,其中:基于前一段时间的观看轨迹,运用神经网络方法预测出下一时刻的观看点;将要预测时刻的全景视频帧映射成多个方向上的小视频帧,每个小视频帧通过第一个卷积神经网络CNN得到相应的显著图,将所述显著图合并成整个的视频帧的显著图,再将所述整个的视频帧的显著图通过第二个卷积神经网络CNN进行精炼得到全景视频帧显著图;将预测的所述观看点和所述全景视频帧显著图输入到全连接网络,得到最终的预测点即全景视频观看位置点。本发明综合考虑了观看视频时的时间连续性和全景视频的映射失真问题,并将两者结合起来得到最终的最优预测点,因而能够实现较高的预测准确率。
-