公开(公告)号：CN115984125A

公开(公告)日：2023-04-18

申请号：CN202211575771.4

申请日：2022-12-09

Applicant: 南京邮电大学

Inventor： 熊健 ,  吴俊浩 ,  罗旺 ,  高浩

IPC: G06T5/00 ,  H04N19/85 ,  H04N19/124

Abstract: 本发明公开了一种面向宽码率动态点云编码的占位图引导伪影去除方法，所述方法包括：从基于视频的动态点云编码压缩块中提取出占位图，并对占位图进行上采样，使其大小尺寸等同于几何压缩块；将几何压缩块和上采样后的占位图级联，然后输入到Uformer变体中，提取出几何压缩块的有效特征，并得到恢复块；根据恢复块和几何压缩块计算得到对应的对数误差，并将其作为误差损失；使用SGD函数更新学习率，利用自适应梯度优化器迭代模型参数、平衡误差损失，对模型进行训练，得到最终的最优模型；将几何块和对应上采样后的占位图级联，输入最优模型，得到去除伪影后的几何视频帧。

公开(公告)号：CN115457015A

公开(公告)日：2022-12-09

申请号：CN202211189584.2

申请日：2022-09-28

Applicant: 南京邮电大学

Inventor： 熊健 ,  王小奇 ,  罗旺 ,  高浩

IPC: G06T7/00 ,  G06V10/20 ,  G06V10/40 ,  G06V10/764 ,  G06V10/774 ,  G06V10/80 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种基于视觉交互感知双流网络的图像无参考质量评估方法及装置，通过考虑人眼视觉系统的视觉掩蔽效应提出了三个模块：内容感知模块，失真感知模块和视觉交互模块。其中，内容感知模块采用基于ImageNet预训练的ResNet50网络用以提取语义特征作为图像内容表示；失真感知模块该模块通过在大规模合成失真数据集上训练BoTNet以提取图像失真的表征特征；视觉交互模块通过基于自注意力机制的特征融合模块来建模图像内容和失真的视觉交互关系。本发明提出的视觉感知交互网络基于人眼视觉系统的视觉掩蔽效应，对图像内容和图像失真的视觉交互作用进行建模，能够有效提高图像感知质量评估性能。

公开(公告)号：CN112911302B

公开(公告)日：2022-07-26

申请号：CN202110073333.7

申请日：2021-01-20

Applicant: 南京邮电大学

Inventor： 熊健 ,  罗旺 ,  高浩

IPC: H04N19/42 ,  H04N19/103 ,  H04N19/182

Abstract: 本发明公开了一种面向动态点云几何信息压缩的新型合并预测编码方法，包括：根据对远层图像编码单元进行预测的预测误差和远层图像编码单元的改进预测模式的预测误差，获得远层图像编码单元中各像素的偏移值；根据解码需求选择占位图引导合并预测编码和非占位图引导合并预测编码；其中，占位图引导合并预测编码与非占位图引导合并预测编码，包括：筛选远层图像编码单元的待预测像素，计算待预测像素的预测像素值。本发明能够提升点云几何信息的编码性能。

公开(公告)号：CN112637608A

公开(公告)日：2021-04-09

申请号：CN202011501716.1

申请日：2020-12-18

Applicant: 南京邮电大学

Inventor： 熊健 ,  吴思凡 ,  罗旺 ,  王小奇 ,  王思雨 ,  高浩

IPC: H04N19/70 ,  H04N19/85

Abstract: 本发明公开了一种动态点云几何信息压缩率失真优化方法及装置，针对基于视频的动态点云编码率失真优化过程中，失真模型与点与几何信息质量评估准则不一致的问题，基于点到面误差对现有的率失真优化方法进一步优化。所述方法包括：获取三维动态点云视频分解后的几何图像的原始深度信息以及使用现有率失真优化方法编码得到的几何图像的重构深度信息；基于获取到的原始深度信息和重构深度信息，计算几何图像中原始点所在平面的法向量与该原始点的投影方向之间的估计角度θ；利用计算得到的估计角度θ，优化现有率失真优化方法中几何图像的重构点到原始点所在平面距离误差的编码。本发明能够提升计算几何信息的失真的精确度。