一种基于感知模型的视频编解码方法及系统

    公开(公告)号:CN114827617A

    公开(公告)日:2022-07-29

    申请号:CN202210732354.X

    申请日:2022-06-27

    发明人: 宋奇蔚 秦良山

    摘要: 本申请提供了一种基于感知模型的视频编解码方法及系统,涉及视频处理技术领域,具体为:摄像头采集直播图像,将原始视频帧流发送至采集服务器;采集服务器根据终端设备反馈的主观评测结果对编码目标参数进行更新;基于对抗网络结构化编码模型和更新的编码目标参数对原始视频帧流进行压缩编码,将压缩编码后的数据发送至控制中心;控制中心基于对抗网络结构化解码模型对压缩编码后的数据进行还原解码,将还原解码得到的视频帧流发送至终端设备;终端设备播放视频流,采集观看用户的主观评测结果,将主观评测结果上传至控制中心;控制中心基于感知模型对主观评测结果进行合理性校验。本申请能够显著降低编码复杂度,提升用户体验感。

    一种面向语义分割的云边协同视频压缩上载方法及装置

    公开(公告)号:CN114143541A

    公开(公告)日:2022-03-04

    申请号:CN202111320006.3

    申请日:2021-11-09

    摘要: 本发明公开了一种面向语义分割的云边协同视频压缩上载方法及装置,属于无线通信与计算机视觉交叉领域。一方面,云服务器在离线阶段针对语义分割DNN定制不同级别的以像素块为单位的量化表;在在线阶段根据边缘端设备上载的视频帧生成空间自适应的压缩策略,并将该压缩策略与语义分割结果一同反馈到边缘端设备;另一方面,边缘端设备将每次反馈得到的压缩策略与语义分割结果缓存在本地,并基于时间相关性提取视频光流信息,将压缩策略与语义分割结果从上载帧传播到当前帧,并进一步选取关键帧上载到云端以适应视频变化。如此,能够在保障上载视频语义分割精度的同时最小化上载的视频体积,从而促进语义分割技术在海量边缘端设备的大规模应用。

    云会议共享桌面动态编码方法、装置、设备及存储介质

    公开(公告)号:CN113259668B

    公开(公告)日:2021-10-08

    申请号:CN202110783079.X

    申请日:2021-07-12

    发明人: 马华文

    摘要: 本发明公开了一种云会议共享桌面动态编码方法、装置、设备及存储介质,所述方法包括如下步骤:建立桌面采集线程,在采集线程中动态采集,将采集到的数据放入到采集队列中;建立桌面编码线程,从采集队列中取出有效数据,先进行缩放再进行编码处理,同时根据信道状态动态设置编码参数;建立桌面打包线程,同时创建信道状态监测线程,然后从编码队列中取出数据进行打包发送,当信道状态收到有效反馈则解析出数据放入到状态队列中;建立动态机制与分析线程,从状态队列中取出当前信道状态,然后进行数据归一化处理,将得到的采集频率和编码参数回调给采集线程和编码线程进行处理。本发明可以提升用户云会议中共享桌面的使用体验。

    图像处理方法与设备
    46.
    发明授权

    公开(公告)号:CN109936746B

    公开(公告)日:2021-07-16

    申请号:CN201910300151.1

    申请日:2016-12-30

    摘要: 提供了一种图像处理方法与设备。所述图像处理方法包括:接收接收端发送的反馈信息,所述反馈信息用于指示所述接收端在发送所述反馈信息之前,接收到的所述发送端发送的图像帧的接收状态;获取第一图像帧;当所述反馈信息指示接收错误时,根据预置错误恢复机制对所述第一图像帧进行编码,生成所述第一图像帧的编码数据;向所述接收端发送所述第一图像帧的编码数据,可以提高信道利用率。

    用于在暂停期间在360°沉浸式视频中提供质量控制的系统和方法

    公开(公告)号:CN112789854A

    公开(公告)日:2021-05-11

    申请号:CN201980065088.6

    申请日:2019-09-30

    摘要: 一种用于在暂停视频流播会话期间在360º沉浸式视频中提供质量控制的系统和方法,其中取决于用户凝视向量信息,暂停的视频帧可包括多个混合质量的视频贴片。在视频优化节点的暂停控制下,将贴片化视频帧的所有贴片的视频质量均衡化为与在视口中呈现的贴片的质量对应的最高视频质量。在一个实施例中,生成具有在完整的360º沉浸式视频帧中具有相同的均衡化视频质量的贴片的自定义替换视频帧(例如,X帧),将它呈现给客户端装置播放器以用于在暂停流播会话时解码并显示,而不是混合质量的视频帧。在另一个实施例中,将基于自定义替换视频帧的静态图像提供给客户端装置以进行显示,而不是混合质量的暂停视频帧。

    一种5G网络下无线视频低延时传输方法

    公开(公告)号:CN112291824A

    公开(公告)日:2021-01-29

    申请号:CN202011318446.0

    申请日:2020-11-23

    摘要: 本发明涉及一种5G网络下无线视频低延时传输方法。本方法将无线网络切换与实时视频传输的码率调整相结合,在终端移动过程中通过内置无线通信模块采集不同采集时刻的5G信号质量序列,构建5G信号质量序列的线性模型,结合5G信号质量的时间序列的相关系数与5G信号质量序列的线性模型的斜率判断5G信号质量序列随时间变化的趋势来预测网络切换点,在网络链路未切换之前启动无线视频终端编码参数切换判决,提前预测信道可能发生的变化调节视频编码码率,对视频数据传输数据量进行调整,在网络信号切换前做好准备,做到平稳切换,尽可能保证视频高清晰度的情况下,解决视频卡顿,延时高的问题,提高了视频数据传输性能。