公开(公告)号：CN119316609B

公开(公告)日：2025-02-25

申请号：CN202411837846.0

申请日：2024-12-13

Applicant: 华侨大学

Inventor： 陈婧 ,  赵泉旭 ,  曾焕强 ,  林琦 ,  郑惠洁

IPC: H04N19/53 ,  G06N3/0464 ,  H04N19/80

Abstract: 本发明公开了一种基于自注意力机制的端到端视频压缩方法及系统，涉及视频编码领域，方法包括：提取当前帧、运动参考帧和上一时刻的重构帧的浅层特征；提取当前帧和运动参考帧之间的运动信息特征；压缩运动信息特征，获得压缩后的运动信息特征；将压缩后的运动信息特征补偿在上一时刻的重构帧的浅层特征上，获得当前时刻的上下文信息特征；压缩获得压缩后的上下文信息特征；将压缩后的上下文信息特征和当前帧的浅层特征融合特征进行编码，获得当前时刻的重构帧；对当前时刻的重构帧进行上采样，获得压缩视点图像；对压缩视点图像中的运动信息累积误差进行修正，得到下一帧的运动参考帧。本发明能够在提高运动估计的准确性的同时提升了编码的效率。

公开(公告)号：CN119316609A

公开(公告)日：2025-01-14

申请号：CN202411837846.0

申请日：2024-12-13

Applicant: 华侨大学

Inventor： 陈婧 ,  赵泉旭 ,  曾焕强 ,  林琦 ,  郑惠洁

IPC: H04N19/53 ,  G06N3/0464 ,  H04N19/80

Abstract: 本发明公开了一种基于自注意力机制的端到端视频压缩方法及系统，涉及视频编码领域，方法包括：提取当前帧、运动参考帧和上一时刻的重构帧的浅层特征；提取当前帧和运动参考帧之间的运动信息特征；压缩运动信息特征，获得压缩后的运动信息特征；将压缩后的运动信息特征补偿在上一时刻的重构帧的浅层特征上，获得当前时刻的上下文信息特征；压缩获得压缩后的上下文信息特征；将压缩后的上下文信息特征和当前帧的浅层特征融合特征进行编码，获得当前时刻的重构帧；对当前时刻的重构帧进行上采样，获得压缩视点图像；对压缩视点图像中的运动信息累积误差进行修正，得到下一帧的运动参考帧。本发明能够在提高运动估计的准确性的同时提升了编码的效率。