-
公开(公告)号:CN114286093B
公开(公告)日:2025-05-23
申请号:CN202111599851.9
申请日:2021-12-24
Applicant: 杭州电子科技大学
IPC: H04N19/119 , H04N19/105 , H04N19/14 , H04N19/11 , H04N19/593 , H04N19/147 , H04N19/96 , G06V10/764 , G06V10/82 , G06V10/774 , G06V20/40 , G06N3/0464 , G06N3/0455 , G06N3/0499 , G06N3/084
Abstract: 本发明公开了一种基于深度神经网络的快速视频编码方法。本发明包括基于深度神经网络的CU划分模块、基于邻域相关性的PU模式选择模块;CU块在帧内编码时会先经过PU模式选择计算率失真代价,此时先利用基于邻域相关性的PU模式选择模块进行优化,通过轻量级HCT模型的预测结果来减少RDO计算的候选模式数量;PU模式选择结束后,编码器会进行CU块深度判决,判断该CU块是否进行划分,此时由基于深度神经网络的CU划分模块进行优化,从HCT模型获得预测结果来判断是否提前终止划分。否则继续向下划分子CU块,并继续进行PU模式选择和CU块划分判决。本发明降低了CU递归划分的复杂度,简化了帧内预测模式的选择过程,有效地提高了HEVC编码的时间效率。
-
公开(公告)号:CN115442620B
公开(公告)日:2025-04-22
申请号:CN202211095417.1
申请日:2022-09-06
Applicant: 杭州电子科技大学
IPC: H04N19/52 , H04N19/149 , H04N19/159 , H04N19/29 , H04N19/48
Abstract: 本发明属于视频编码领域,公开了一种AME低复杂度仿射运动估计方法,包括如下步骤:步骤1:基于划分深度的最优帧间模式的提前预测:根据父CU最优帧间模式来预测子CU最优帧间模式;步骤2:AME内部的低复杂度算法:在AME算法内部,通过CPMV平行与否、迭代过程的提前终止以及有无必要进行细粒度调整优化来加速AME算法;步骤3:AME外部的低复杂度算法:对于需要在传统Inter和AME之间进行模式决策的CU提取相关特征,基于决策树对这样的CU进行提前预测其最优帧间模式,以此跳过RDO决策及次优模式的遍历过程。本发明大大减少了VVC帧间模式决策复杂度。
-
公开(公告)号:CN119324988A
公开(公告)日:2025-01-17
申请号:CN202411874545.5
申请日:2024-12-19
Applicant: 杭州电子科技大学
IPC: H04N19/147 , H04N19/149 , H04N19/124 , H04N19/159 , H04N19/61 , H04N19/30
Abstract: 本发明公开一种基于多层级架构的VVC全零块跳过方法,从变换块TU中读取变换系数后,通过其最大变换系数的幅值与预先计算的阈值进行比较,若小于阈值则判断为真全零块GAZB,则跳过量化和编码过程,反之则为非GAZB,接着利用率失真优化算法计算非GAZB跳过的代价,判断是否跳过非GAZB的编码过程,若其正常编码的代价大于非GAZB跳过的代价,则将该块判断为伪全零块PAZB进行跳过,反之,则被判断为非全零块NAZB;而在依赖性量化DQ的计算过程中,通过统计CG上下文特征来进行全零检测,以跳过检测为全零CG的编码过程。本发明没有使用机器学习技术,在确保编码质量的情况下减少了计算复杂度,加快编码速度。
-
公开(公告)号:CN119011835A
公开(公告)日:2024-11-22
申请号:CN202410948217.9
申请日:2024-07-16
Applicant: 杭州电子科技大学
IPC: H04N19/124 , H04N19/154 , H04N19/70 , G06T9/00 , G06N3/0475 , G06N3/094
Abstract: 本发明属于视频图像压缩领域,公开了一种适用于机器视觉任务的恰可识别失真预测模型及方法,包括JRD图像生成网络G、判别网络D和残差引导JRD回归网络R;所述JRD图像生成网络G以未压缩的原图像作为输入,以假JRD图像作为输出;之后,将生成图像与原始图像的残差作为对原图的补偿信息一起输入残差引导JRD回归网络R,最终输出预测的JRD分数,其中判别网络D以对抗的方式与生成网络G一起训练,以帮助G产生更接近真JRD图像的生成结果。在本发明提出的无参考模型中,原图像不需要进行若干次的压缩编解码,使预测效率大大提升。同时,在回归网络中,生成图像的残差作为补充信息被输入,使模型最终预测结果更加准确可靠。
-
公开(公告)号:CN118784845A
公开(公告)日:2024-10-15
申请号:CN202410741652.4
申请日:2024-06-11
Applicant: 杭州电子科技大学
IPC: H04N19/172 , H04N19/20 , G06V10/80 , G06V10/82 , G06T7/246 , G06T7/269 , G06N3/0455 , G06N3/0464 , G06N3/084
Abstract: 本发明公开了基于多阶层特征融合的虚拟视点绘制空洞填充方法,将局部连续帧和非局部随机帧,通过多阶层编码进行特征细化,从空洞区域以外的已知区域传播时空信息,得到局部特征块和非局部特征块;对局部连续帧进行光流补全,得到带有空洞的相邻帧的光流特征,用于检测虚拟视点序列中的运动对象,以引导特征传播,特征传播结合所述局部特征块,传递和更新运动对象的信息,缓解了前背景混叠问题;将更新后的特征和非局部特征块进行内容重建,再解码重构得到空洞修复帧,加入多头时空自注意力模块和融合前馈神经网络,有利于聚合不同特征的信息,充分利用局部和非局部相邻帧的特征,较好处理伪影的问题。
-
公开(公告)号:CN118537384A
公开(公告)日:2024-08-23
申请号:CN202410592852.8
申请日:2024-05-14
Applicant: 杭州电子科技大学
IPC: G06T7/50 , G06N3/0464 , G06N3/0455 , G06N3/0495
Abstract: 本发明属于深度估计技术领域,公开了一种异构多尺度事件相机单目深度估计优化方法,包括如下步骤:步骤1:异构多尺度事件相机单目深度估计优化模型;步骤2:异构数据匹配优化;步骤3:构建异构特征学习模型。本发明提出了异构多尺度事件相机单目深度估计优化模型,在研究事件相机单目深度估计模型优化的基础上,提出了异构数据匹配优化模型,解决了事件相机传感器与彩色相机传感器数据特征、结构迥异的问题;提出了异构数据学习模型,解决了异构数据特征不匹配的问题、学习约束过大导致部分通道产生负面效果的问题,为深度估计行业方案提供技术选择。
-
公开(公告)号:CN117915104A
公开(公告)日:2024-04-19
申请号:CN202410074860.3
申请日:2024-01-18
Applicant: 杭州电子科技大学
IPC: H04N19/30 , H04N19/103 , H04N19/149 , H04N19/176 , H04N19/503 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于神经网络的VVC多层次快速帧间编码系统及方法。本发明包括基于运动场与编码信息的CU划分终止模块;基于轻量级全连接网络的CTU深度预测模块;基于编码信息的TT划分终止模块;基于CNN的CU划分模式选择模块;通过四个模块之间多层次的组合,避免冗余的划分方式,降低帧间编码复杂度。本发明针对帧间编码的特性,利用编码上下文信息和神经网络的特征提取能力,从多个层次出发,各层次相互结合,兼顾复杂度与准确性,有效的降低了VVC帧间编码复杂度。
-
公开(公告)号:CN117915095A
公开(公告)日:2024-04-19
申请号:CN202410020227.6
申请日:2024-01-05
Applicant: 杭州电子科技大学
IPC: H04N19/147 , H04N19/436 , H04N19/124 , H04N19/146
Abstract: 本发明属于视频编码领域,涉及一种扫描线级加速并行RDOQ方法,采用SIMD指令,在预量化阶段同时对每个变换系数进行独立的预量化处理;在最优系数水平决策阶段,并行处理预量化后得到的量化系数,通过率失真优化来确定量化系数的最优值;在最后有效系数位置决策阶段,继续以并行处理的方式,同时基于贪婪策略获取到最优的最后有效系数位置。本发明的方法在保证编码性能损失较小的前提下,实现了RDOQ过程并行计算,且相比现有的并行RDOQ方法,本发明适用于硬件加速领域,基于贪婪算法实现LSC位置决策,创新度高,硬件吞吐量和编码性能有一个良好的折衷,为视频编码并行优化相关的算法研究提供了参考,具有重大意义。
-
公开(公告)号:CN112085683B
公开(公告)日:2024-04-09
申请号:CN202010816235.3
申请日:2020-08-14
Applicant: 杭州电子科技大学
Abstract: 本发明公开了一种显著性检测中的深度图可信度检测方法。该方法具体包括以下步骤:判断待测深度图像的收敛性;B)对收敛的深度图像做中值滤波处理;C)对中值滤波处理后的深度图像及其参考图像进行边缘检测,并获取边缘信息;D)计算深度图像及其参考图像的边缘的相似度,获得可信度分数。该方法引入图像收敛性概念,过滤显著物体不明显的深度图像,在提取边缘特征前进行中值滤波处理,通过自适应阈值的边缘检测,在像素级别上求取深度图像和参考图像的相似度,使深度图像显著物体的边缘定位更准确,不会受到边缘附近区块因失真等原因导致的数值变化的影响,获得的深度图像的可信度结果更为准确。
-
公开(公告)号:CN117036539A
公开(公告)日:2023-11-10
申请号:CN202311168862.0
申请日:2023-09-12
Applicant: 杭州电子科技大学
Abstract: 本发明公开了一种基于深度学习的虚拟视点绘制空洞填充方法及装置,基于原图及其掩膜图,得到待修复图,将待修复图和掩膜图输入渐进式迭代网络,渐进式迭代网络通过部分卷积对待修复图进行局部空洞识别,并基于知识一致注意力机制进行空洞填充,构建损失函数以提升背景空洞区域和已知区域的语义一致性;构建上下文特征传播损失,融入步骤S1中构建的损失函数,将渐进式迭代网络的输出,进行相似性编码,得到图像块和非空洞区域图像块的相似度,基于相似度,使得背景空洞生成具有语义一致性的填充块;将渐进式迭代网络的输出,进行加权合并,得到最终的修复图。
-
-
-
-
-
-
-
-
-