公开(公告)号：CN104780383B

公开(公告)日：2017-09-19

申请号：CN201510053812.7

申请日：2015-02-02

Applicant: 杭州电子科技大学

Inventor： 陆宇 ,  柯小林 ,  周洋 ,  姚英彪 ,  郭春生

IPC: H04N19/597 ,  H04N19/82

Abstract: 本发明涉及一种3D‑HEVC多分辨率视频编码方法。本发明方法在视频编码器内部对基本视点视频采用原始分辨率编码，而对依赖视点视频采用降分辨率编码。本发明方法将基本视点视频下采样作为依赖视点视频的参考帧，同时在编码器内对依赖视点视频进行下采样。在解码器内，根据人眼对视频图像亮度的变化敏感度大于色度的变化，采用双滤波器插值方法对亮度分量采用6抽头滤波器进行精确上采样，而对色度分量采用4抽头滤波器进行上采样。本发明方法在保持编码性能的前提下，降低了算法复杂度。

公开(公告)号：CN115361557B

公开(公告)日：2025-03-25

申请号：CN202210992815.7

申请日：2022-08-18

Applicant: 杭州电子科技大学

Inventor： 陈平安 ,  周洋 ,  林坤 ,  蔡毛毛 ,  殷海兵 ,  黄晓峰 ,  杨阳 ,  俞定国

IPC: H04N19/154 ,  H04N19/149 ,  H04N19/176 ,  H04N19/182 ,  H04N13/128 ,  H04N13/161

Abstract: 本发明方法公开了结合注意力机制的立体图像舒适度预测方法。本发明方法首先通过对输入的左、右视点图像分别进行半重叠采样，得到多个图像块对作为模型输入，分别得到低、中、高级特征的相加特征图和相减特征图；然后分别将低、中、高级特征的相加和相减特征图拼接成新的特征块，输入并行双注意力模块进行注意力加权；将低、中、高级特征的通道和空间注意力加权特征拼接成新的特征块，并分别输入对应的次要子网络，最终得到三个次要子网络的输出特征向量，合并三个次要子网络的输出特征向量，并输入用于回归预测的全连接层网络进行舒适度回归预测。本发明方法不仅降低了流程复杂度，还规避了因视差计算不准确带来的影响。

公开(公告)号：CN115426535B

公开(公告)日：2024-08-27

申请号：CN202211065539.6

申请日：2022-09-01

Applicant: 杭州电子科技大学

Inventor： 林坤 ,  周洋 ,  蔡毛毛 ,  殷海兵 ,  陈平安 ,  黄晓峰 ,  俞定国 ,  杨阳

IPC: H04N21/81 ,  H04N13/117 ,  H04N13/128 ,  H04N13/15 ,  H04N13/161 ,  H04N13/366

Abstract: 本发明方法公开了基于背景分离的RGB‑D视频合成视点空洞掩盖方法。本发明方法以参考彩色图、参考深度图和相机信息为单位，利用加入并行注意力的P‑UNet网络分离彩色图前景、根据参考深度图前景与背景之间的像素突变分离前景，将两种方法的背景结合并使用高斯混合模型构建更干净的背景；使用基于深度和时间一致性的修复方法修复背景；然后根据3D变换公式和相机信息绘制出虚拟视点和虚拟背景，并再次修复虚拟背景；最后使用虚拟背景填充虚拟视点空洞中的缺失像素。本发明避免了修复时产生前景渗透，生成的空洞区域在相邻帧之间更有时间一致性，减少视频播放时的帧闪，提高了视觉质量。

公开(公告)号：CN117880482A

公开(公告)日：2024-04-12

申请号：CN202311556130.9

申请日：2023-11-21

Applicant: 杭州电子科技大学

Inventor： 刘春晖 ,  周洋 ,  赵俊能 ,  张志 ,  殷海兵 ,  黄晓峰

IPC: H04N13/282

Abstract: 本发明公开了面向3D视频的时间空间双维度帧合成方法。本发明首先对输入视频中的每帧原始输入图像通过特征提取网络提取特征信息，生成多个不同尺度下的特征图；然后对输入视频在时间维度进行插帧操作，生成时间维度插帧图像，在视点维度进行插帧操作，生成视点维度合成图像；最后通过维度融合网络，将原始输入图像以及对应的特征图、生成的光流信息和掩膜、时间维度插帧图像和视点维度合成图像进行融合，生成同时考虑两个维度信息的高质量生成帧。本发明结合时间、视点双维度信息，生成高质量的中间合成帧，保证了整体网络的并行度，避免了使用不同网络时造成的时延不同步在降低计算冗余的情况下克服了深层网络丢失图像原始信息的问题。

公开(公告)号：CN116800949A

公开(公告)日：2023-09-22

申请号：CN202310631949.0

申请日：2023-05-30

Applicant: 杭州电子科技大学

Inventor： 陈平安 ,  周洋 ,  林坤 ,  蔡毛毛 ,  殷海兵 ,  黄晓峰

IPC: H04N17/00 ,  H04N13/00 ,  G06N3/0464

Abstract: 本发明涉及立体图像舒适度技术领域，为解决评估立体图像感知不适度问题，本发明采用了一种基于深度学习的立体图像舒适度预测方法以预测立体图像舒适度的问题，其首先根据左右视点图像构建RGB独眼图，然后利用3D显著图裁剪得到RGB独眼图图像块，并将RGB独眼图图像块输入卷积神经网络，通过计算输出预测值均值得到立体图像舒适度最终预测值。本发明通过对红、绿和蓝三通道单独计算独眼图，保留了立体图像的彩色信息，并且基于显著性对立体图像进行图像裁剪，扩充了用于模型训练的样本，最大程度上保留了观看者最关注的图像区域。通过添加分组加权注意力模块对CSP‑Net模型进行了创造性改进优化，提高了计算效率。

公开(公告)号：CN115131209A

公开(公告)日：2022-09-30

申请号：CN202210740614.8

申请日：2022-06-28

Applicant: 杭州电子科技大学

Inventor： 唐然 ,  黄晓峰 ,  章天杰 ,  周洋 ,  陆宇 ,  殷海兵 ,  崔燕

IPC: G06T3/40 ,  G06T5/50 ,  G06V10/25 ,  G06V10/46 ,  G06V10/75

Abstract: 本发明属于图像处理领域，公开了一种基于DSP的实时视频拼接方法，采用select操作方式定向选择数据，借助gather和scatter指令将不连续RAM地址中的数据加载到向量寄存器中；图像配准算法部分：在匹配前设定阈值预筛选特征点，基于汉明距离进行特征点匹配。算法均使用SIMD指令集并行处理多数据，提高计算效率；采用PING‑PONG方式传输数据，旨在隐藏视频拼接过程中外部存储器访问的周期，从而有效提高数据吞吐量。最后，基于DAG生成算法调度表，在双DSP平台上并行执行ORB特征提取算法。本发明减少了计算复杂度；并为计算机视觉相关的算法在DSP平台上研究提供了参考。

公开(公告)号：CN114222117A

公开(公告)日：2022-03-22

申请号：CN202111554648.X

申请日：2021-12-17

Applicant: 杭州电子科技大学

Inventor： 查攀 ,  周洋 ,  殷海兵

IPC: H04N19/103 ,  H04N19/14 ,  H04N19/147 ,  H04N19/172

Abstract: 本发明属于数字视频编解码领域，公开了一种基于视频特征的编码参数自适应选择方法,提出了一种参数取值算法，依据该算法能够确定出相对最优的参数取值，即使编码器达到更好的RD性能，同时达到更低的编码复杂度，实现了利用较小复杂度代价换取较大RD性能增益的目的。分析了ctu、subme这两个参数受视频特征影响的情况。同时，将不同尺寸CU的比例信息、量化系数QP作为特征参量来描述视频特征；此外，将P帧与B帧中的intra块的比例、帧间预测误差satd作为调节因子。分析了参数取值与视频特征间的变化关系，用统计建模的方法建立了参数取值与视频特征参量间的数学模型，从而建立了基于视频特征的参数自适应取值模型。

公开(公告)号：CN111010583B

公开(公告)日：2021-09-07

申请号：CN201911206004.4

申请日：2019-11-29

Applicant: 杭州电子科技大学

Inventor： 周洋 ,  谢菲 ,  尉婉丽 ,  周辉 ,  陆宇 ,  殷海兵 ,  黄晓峰

IPC: H04N19/895 ,  H04N19/176

Abstract: 本发明涉及一种基于残差分块的自适应多视点视频错误隐藏方法。新一代多视点视频编码标准MV‑HEVC一旦出现数据丢包，将影响与丢失帧相关联的所有帧，产生差错传播。本发明方法针对多视点视频中中间视点视频流丢包的现象，首先利用丢失块可用邻块的残差信息对丢失块进行残差重建，然后根据残差值对丢失块进行模式划分，划分结束后基于残差信息对丢失块划分后的子块进行重建顺序排序，最后基于重建顺序结合时空域信息和视点间信息重建丢失块。本方法结合了丢失块邻块的时空域信息和帧间信息，对于多视点视频的中间视点码流丢失问题有较好的重建效果。

公开(公告)号：CN109819230B

公开(公告)日：2020-08-25

申请号：CN201910081049.7

申请日：2019-01-28

Applicant: 杭州电子科技大学

Inventor： 周洋 ,  周辉 ,  谢菲 ,  尉婉丽

IPC: H04N13/106 ,  H04N13/128 ,  H04N13/133 ,  H04N13/194 ,  H04N13/161

Abstract: 本发明涉及一种基于HEVC标准的立体三维视频错误隐藏方法。传统错误隐藏技术不适应新标准HEVC的扩展平台MV‑HEVC。本发明方法首先确定立体视频流中右视点丢失块所属区域类型，根据区域类型不同，分别采用不同的恢复方法。获取前向参考帧中同位置的像素块和后向参考帧中同位置的像素块，将两个像素块中对应的像素点的差值的绝对值进行累加后求取平均值，如果平均值小于等于阈值，则判断为背景区域，采用加权平均前后向帧中同位置的像素值来填补丢失块；如果平均值大于阈值，则判断为前景区域，采用构建候选矢量集对丢失块进行矢量位移补偿恢复。利用本发明方法方法，使得匹配精度提升，对立体视频流传输丢包有很好的恢复效果。

公开(公告)号：CN111405265A

公开(公告)日：2020-07-10

申请号：CN202010214373.4

申请日：2020-03-24

Applicant: 杭州电子科技大学

Inventor： 张博文 ,  周洋 ,  梁文青 ,  崔金鹏 ,  陆宇 ,  殷海兵

IPC: H04N13/122 ,  H04N13/275

Abstract: 本发明公开了一种新型的图像绘制技术，包括以下步骤：3D图像变换；利用图像之间的深度差值来划分绘制不准确区域；设置图像的前景阈值和背景阈值；处理空洞。上述技术方案利用图像之间的深度差值来划分绘制不准确区域，根据图像的实际情况将图像中视觉冲击最明显的区域中的破损区域重新进行绘制，从而让图像的绘制区域变得更加清晰，减少最后一步填充空洞时空洞的个数，从而降低时间复杂度。