一种基于深度调整的3D视频舒适度改善方法

    公开(公告)号:CN111405264B

    公开(公告)日:2022-04-12

    申请号:CN202010068774.3

    申请日:2020-01-20

    Abstract: 本发明公开了一种基于深度调整的3D视频舒适度改善方法。解决了一般3D视频观看不舒适、视觉体验不佳的问题。本发明包括以下步骤:S1:对左视点图、右视点图的深度图都进行预处理,得到预处理图;S2:对预处理图进行深度滤波,得到滤波图;S3:对滤波图进行深度去纹理,得到去纹理图;S4:根据去纹理图进行虚拟视点绘制,获得虚拟右视点彩色图;S5:用虚拟右视点彩色图和原始视点图进行替换得到改善的3D视频。本发明的增益效果是降低了视差、梯度变化、纹理对观感体验的影响,实现了整体舒适度的改善。

    一种基于多尺度DCT变换的立体图像舒适度预测方法

    公开(公告)号:CN109510981A

    公开(公告)日:2019-03-22

    申请号:CN201910063073.8

    申请日:2019-01-23

    Abstract: 本发明涉及视频图像处理技术领域,公开了一种基于多尺度DCT变换的立体图像舒适度预测方法,包括以下步骤:步骤S01:对视差图做若干尺度的块分割并进行二维DCT变换得到每个块的DCT变换结果;步骤S02:对DCT变换结果进行特征提取;步骤S03:将特征提取的结果归一化至一个相同的动态范围内;步骤S04:将归一化后的结果输入至随机森林算法,得出结果。本发明提出的模型预测结果与主观评价结果具有很好的相关性,可以较为准确的反映出立体图像的观看舒适度。该舒适度预测模型可以直接应用在3D图像或视频等质量预测与改善等工程中。

    一种基于人眼感知的立体视频B帧错误隐藏方法

    公开(公告)号:CN108668135A

    公开(公告)日:2018-10-16

    申请号:CN201810326867.4

    申请日:2018-04-12

    Abstract: 本发明一种基于人眼感知的立体视频B帧错误隐藏方法。传统的错误隐藏技术对于新标准HEVC,以及扩展的多视点的新标准MV-HEVC不能很好适应。本发明方法首先对立体视频中的丢失块划分为静止块和运动块,然后对不同的丢失块类型采用不同的恢复方式,静止块选择直接拷贝的方式;对运动块使用基于双目恰可察觉失真模型的立体视频错误隐藏算法进行恢复,具体是:首先自适应尺寸划分,然后建立候选运动/视差矢量集,计算基于BJND模型匹配准则值,最后选择最优运动矢量恢复。本发明方法除了结合了新标准的特性并改进了已有错误隐藏方法之外,还考虑了人眼对于视频画面的失真度特性,对立体视频在网络传输中发生的网络丢包现象有很好的恢复效果。

    一种基于块编码特性的3D视频错误隐藏方法

    公开(公告)号:CN111083502B

    公开(公告)日:2021-06-08

    申请号:CN201911065748.9

    申请日:2019-11-04

    Abstract: 本发明涉及一种基于块编码特性的3D视频错误隐藏方法。本发明方法首先区分丢失块所属的区域类型。属于背景区域的丢失块采用加权平均前后向帧中同位块像素的方法恢复。对属于前景区域的丢失块,利用丢失块的周围可用块的信息来估计当前丢失块的编码预测方式,将丢失块分类成帧内编码块、帧间编码块和视间编码块。针对帧内编码,采用加权融合运动补偿块和视间补偿块恢复;针对帧间编码块,采用线性双向预测或单向搜索预测恢复;针对视间编码块,利用灰度共生矩阵改进传统边界匹配准则恢复。本方法根据不同编码特性的丢失块采用不同的恢复方法对3D视频流传输中右视点出错帧,有较好的重建效果。

    基于视差矢量外推的立体视频右视点B帧错误隐藏方法

    公开(公告)号:CN109922349B

    公开(公告)日:2021-02-19

    申请号:CN201910104758.2

    申请日:2019-02-01

    Abstract: 本发明涉及基于视差矢量外推的立体视频右视点B帧错误隐藏方法。本发明方法首先对立体视频右视点出错帧的同时刻的左视点帧建立视差矢量场;对于帧间编码块,根据帧中的运动预测信息在参考帧中找到帧间编码块对应的运动参考块,并根据运动参考块和搜索帧中的像素信息估计视差矢量;对于帧内编码块,根据周边相邻的帧间编码块的像素信息,计算像素信息最为相近的帧间编码块的视差矢量作为当前帧内编码块的视差矢量。本发明方法处理方式更为精细,在隐藏丢失块的过程中,对帧间编码块与帧内编码块提出了两种不同的隐藏方式,与传统的运动矢量外推算法中仅仅使用拷贝的方式相比,该方法在边界上的处理更为连续平滑。

    一种基于人眼感知的立体视频B帧错误隐藏方法

    公开(公告)号:CN108668135B

    公开(公告)日:2020-08-25

    申请号:CN201810326867.4

    申请日:2018-04-12

    Abstract: 本发明一种基于人眼感知的立体视频B帧错误隐藏方法。传统的错误隐藏技术对于新标准HEVC,以及扩展的多视点的新标准MV‑HEVC不能很好适应。本发明方法首先对立体视频中的丢失块划分为静止块和运动块,然后对不同的丢失块类型采用不同的恢复方式,静止块选择直接拷贝的方式;对运动块使用基于双目恰可察觉失真模型的立体视频错误隐藏算法进行恢复,具体是:首先自适应尺寸划分,然后建立候选运动/视差矢量集,计算基于BJND模型匹配准则值,最后选择最优运动矢量恢复。本发明方法除了结合了新标准的特性并改进了已有错误隐藏方法之外,还考虑了人眼对于视频画面的失真度特性,对立体视频在网络传输中发生的网络丢包现象有很好的恢复效果。

    一种基于残差分块的自适应多视点视频错误隐藏方法

    公开(公告)号:CN111010583A

    公开(公告)日:2020-04-14

    申请号:CN201911206004.4

    申请日:2019-11-29

    Abstract: 本发明涉及一种基于残差分块的自适应多视点视频错误隐藏方法。新一代多视点视频编码标准MV-HEVC一旦出现数据丢包,将影响与丢失帧相关联的所有帧,产生差错传播。本发明方法针对多视点视频中中间视点视频流丢包的现象,首先利用丢失块可用邻块的残差信息对丢失块进行残差重建,然后根据残差值对丢失块进行模式划分,划分结束后基于残差信息对丢失块划分后的子块进行重建顺序排序,最后基于重建顺序结合时空域信息和视点间信息重建丢失块。本方法结合了丢失块邻块的时空域信息和帧间信息,对于多视点视频的中间视点码流丢失问题有较好的重建效果。

    基于视差矢量外推的立体视频右视点B帧错误隐藏方法

    公开(公告)号:CN109922349A

    公开(公告)日:2019-06-21

    申请号:CN201910104758.2

    申请日:2019-02-01

    Abstract: 本发明涉及基于视差矢量外推的立体视频右视点B帧错误隐藏方法。本发明方法首先对立体视频右视点出错帧的同时刻的左视点帧建立视差矢量场;对于帧间编码块,根据帧中的运动预测信息在参考帧中找到帧间编码块对应的运动参考块,并根据运动参考块和搜索帧中的像素信息估计视差矢量;对于帧内编码块,根据周边相邻的帧间编码块的像素信息,计算像素信息最为相近的帧间编码块的视差矢量作为当前帧内编码块的视差矢量。本发明方法处理方式更为精细,在隐藏丢失块的过程中,对帧间编码块与帧内编码块提出了两种不同的隐藏方式,与传统的运动矢量外推算法中仅仅使用拷贝的方式相比,该方法在边界上的处理更为连续平滑。

    一种基于残差分块的自适应多视点视频错误隐藏方法

    公开(公告)号:CN111010583B

    公开(公告)日:2021-09-07

    申请号:CN201911206004.4

    申请日:2019-11-29

    Abstract: 本发明涉及一种基于残差分块的自适应多视点视频错误隐藏方法。新一代多视点视频编码标准MV‑HEVC一旦出现数据丢包,将影响与丢失帧相关联的所有帧,产生差错传播。本发明方法针对多视点视频中中间视点视频流丢包的现象,首先利用丢失块可用邻块的残差信息对丢失块进行残差重建,然后根据残差值对丢失块进行模式划分,划分结束后基于残差信息对丢失块划分后的子块进行重建顺序排序,最后基于重建顺序结合时空域信息和视点间信息重建丢失块。本方法结合了丢失块邻块的时空域信息和帧间信息,对于多视点视频的中间视点码流丢失问题有较好的重建效果。

    一种基于HEVC标准的立体三维视频错误隐藏方法

    公开(公告)号:CN109819230B

    公开(公告)日:2020-08-25

    申请号:CN201910081049.7

    申请日:2019-01-28

    Abstract: 本发明涉及一种基于HEVC标准的立体三维视频错误隐藏方法。传统错误隐藏技术不适应新标准HEVC的扩展平台MV‑HEVC。本发明方法首先确定立体视频流中右视点丢失块所属区域类型,根据区域类型不同,分别采用不同的恢复方法。获取前向参考帧中同位置的像素块和后向参考帧中同位置的像素块,将两个像素块中对应的像素点的差值的绝对值进行累加后求取平均值,如果平均值小于等于阈值,则判断为背景区域,采用加权平均前后向帧中同位置的像素值来填补丢失块;如果平均值大于阈值,则判断为前景区域,采用构建候选矢量集对丢失块进行矢量位移补偿恢复。利用本发明方法方法,使得匹配精度提升,对立体视频流传输丢包有很好的恢复效果。

Patent Agency Ranking