公开(公告)号：CN118660186A

公开(公告)日：2024-09-17

申请号：CN202411124016.3

申请日：2024-08-16

Applicant: 南京信息工程大学

Inventor： 庞志宇 ,  于莉

IPC: H04N21/2343 ,  H04N21/4402 ,  H04N23/698 ,  G06T3/4053 ,  G06T3/4046 ,  G06V20/40 ,  G06V10/44 ,  G06V10/82 ,  G06V10/80 ,  G06N3/0464 ,  G06N3/0455

Abstract: 本发明公开了基于神经和多尺度特征融合的360度视频传输方法及系统，涉及视频流传输技术领域，包括：获取360度视频，对360度视频进行预处理，得到预处理后的360度视频，对预处理后的360度视频输入至预先建立的时空下采样模型内，输出得到多尺度特征和低分辨率视频帧；将低分辨率视频帧进行掩码编码，得到处理后的掩码帧，将掩码帧进行重构，得到重建的LR帧；对重建的LR帧和多尺度特征输入至预先建立的上采样超分辨率模型内，输出得到优化后的超分辨率视频帧，能显著减少端到端传输过程中的数据冗余，实现理想的视觉质量。

公开(公告)号：CN117201882A

公开(公告)日：2023-12-08

申请号：CN202311197639.9

申请日：2023-09-15

Applicant: 南京信息工程大学

Inventor： 庞志宇 ,  于莉

IPC: H04N21/466 ,  H04N21/442 ,  H04N21/6375

Abstract: 本发明公开了一种基于瓦片优先级的全景视频传输方法及系统，包括预测出用户观看下一帧全景视频的视口；对全景视频中的预设目标进行检测，获得若干个目标对象框，若目标对象框与预测出的视口有重叠部分，则将目标对象框与预测出的视口合并，得到最终的预测视口；基于所述最终的预测视口，对下一帧全景视频中的所有瓦片进行传输优先级分类；以用户观看体验质量最大为目标，对不同传输优先级的瓦片分配对应的下载码率水平，并按照所述下载码率水平进行瓦片传输；重复以上步骤，直至完成所有帧全景视频传输。本发明能够有效提升全景视频流的传输效率。

公开(公告)号：CN118660186B

公开(公告)日：2024-11-19

申请号：CN202411124016.3

申请日：2024-08-16

Applicant: 南京信息工程大学

Inventor： 庞志宇 ,  于莉

IPC: H04N21/2343 ,  H04N21/4402 ,  H04N23/698 ,  G06T3/4053 ,  G06T3/4046 ,  G06V20/40 ,  G06V10/44 ,  G06V10/82 ,  G06V10/80 ,  G06N3/0464 ,  G06N3/0455

Abstract: 本发明公开了基于神经和多尺度特征融合的360度视频传输方法及系统，涉及视频流传输技术领域，包括：获取360度视频，对360度视频进行预处理，得到预处理后的360度视频，对预处理后的360度视频输入至预先建立的时空下采样模型内，输出得到多尺度特征和低分辨率视频帧；将低分辨率视频帧进行掩码编码，得到处理后的掩码帧，将掩码帧进行重构，得到重建的LR帧；对重建的LR帧和多尺度特征输入至预先建立的上采样超分辨率模型内，输出得到优化后的超分辨率视频帧，能显著减少端到端传输过程中的数据冗余，实现理想的视觉质量。