公开(公告)号：CN115209119B

公开(公告)日：2023-06-23

申请号：CN202210678884.0

申请日：2022-06-15

Applicant: 华南理工大学

Inventor： 晋建秀 ,  杨镒彰 ,  郭锴凌 ,  徐向民

IPC: H04N9/64 ,  H04N9/73 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了一种基于深度神经网络的视频自动着色方法，包括以下步骤：获取原始彩色视频数据集，将彩色视频转化为黑白视频，得到用于网络训练的黑白视频帧序列和彩色视频帧序列；分别计算彩色视频帧序列和黑白视频帧序列中相邻两帧间的正向和反向光流；从数据集中选择相邻的三帧输入至特征提取网络中提取出特征信息图；在目标图像中计算出每个像素点的相邻相似区域；将特征信息图输入初步着色网络得到每一帧图像的多张初步着色图；输入三帧的初步着色图输入光流对齐模块，利用时序损失函数来对初步着色网络进行约束；将初步着色网络的输出和光流对齐模块的输出输入至加强着色网络得到最终输出，并利用L1范数计算最终输出和真实值的误差。

公开(公告)号：CN115209119A

公开(公告)日：2022-10-18

申请号：CN202210678884.0

申请日：2022-06-15

Applicant: 华南理工大学

Inventor： 晋建秀 ,  杨镒彰 ,  郭锴凌 ,  徐向民

IPC: H04N9/64 ,  H04N9/73 ,  G06N3/08 ,  G06N3/04

Abstract: 本发明公开了一种基于深度神经网络的视频自动着色方法，包括以下步骤：获取原始彩色视频数据集，将彩色视频转化为黑白视频，得到用于网络训练的黑白视频帧序列和彩色视频帧序列；分别计算彩色视频帧序列和黑白视频帧序列中相邻两帧间的正向和反向光流；从数据集中选择相邻的三帧输入至特征提取网络中提取出特征信息图；在目标图像中计算出每个像素点的相邻相似区域；将特征信息图输入初步着色网络得到每一帧图像的多张初步着色图；输入三帧的初步着色图输入光流对齐模块，利用时序损失函数来对初步着色网络进行约束；将初步着色网络的输出和光流对齐模块的输出输入至加强着色网络得到最终输出，并利用L1范数计算最终输出和真实值的误差。