基于视频内容细粒度信息的视频时刻检索方法

    公开(公告)号:CN116450883A

    公开(公告)日:2023-07-18

    申请号:CN202310448759.5

    申请日:2023-04-24

    Abstract: 基于视频内容细粒度信息的视频时刻检索方法,包括以下步骤;步骤1,构建训练集和测试集,并选取原始视频;步骤2,对原始视频进行特征预提取,得到关键帧特征和帧内物体;步骤3,构建文本特征提取模块,使用预训练词嵌入模型来将查询语句映射到嵌入空间中,完成特征提取,并得到文本特征:步骤4,构建文本词性标注模块,标注查询语句中的名词;步骤5,构建跨模态特征融合模块,得到跨模态细粒度内容特征;步骤6,构建词义匹配模块,通过词义匹配生成相关性权重;步骤7,构建时刻检索指导模块计算整个视频对应的相关性内容细粒度特征。本发明通过目标检测网络提取视频中的细粒度信息,构建一个跨模态的检索模型,提高视频时刻检索准确性。

    基于时域金字塔的无参考视频质量评价方法

    公开(公告)号:CN113486821B

    公开(公告)日:2023-07-04

    申请号:CN202110782615.4

    申请日:2021-07-12

    Abstract: 本发明公开了一种基于时域金字塔的无参考视频质量评价方法,主要解决现有技术利用时域信息不充分,导致视频质量评价准确度较低的问题。其实现方案是:获取训练集和测试集;从视频中获取帧组,并对其进行特征提取,获得低、高层视频特征;构建由时域金字塔模块和质量融合模块级联组成的质量评价网络;对质量评价网络进行训练;将测试视频样本输入到训练好的质量评价网络中,得到被测视频的预测质量分数。本发明通过用时域金字塔模块获取时域信息形成金字塔特征,将视频帧间信息进行交互,并作不同方式的采样,提升了来自视频的时域信息的丰富度,充分利用了视频的时域信息,提高了视频质量评价的准确度,可用于图像的采集、管理、传输和处理。

    基于多粒度网络的无参考图像质量评价方法

    公开(公告)号:CN116168011A

    公开(公告)日:2023-05-26

    申请号:CN202310256035.0

    申请日:2023-03-16

    Abstract: 基于多粒度网络的无参考图像质量评价方法,包括以下步骤;步骤1,获取训练样本集B和测试样本集C:步骤2,构建基于多粒度网络的无参考图像质量评价网络模型S:步骤3,对基于多粒度网络的无参考图像质量评价网络模型S进行迭代训练,得到训练好的基于多粒度网络的无参考图像质量评价网络模型S*;步骤4,获取图像的无参考质量评价结果:将测试样本集C作为训练完成的基于多粒度网络的无参考图像质量评价网络模型S*的输入进行前向推理,得到每个测试样本的质量预测分数,以验证模型效果。本发明通过分析不同粒度的图像块中包含的丰富局部特征,实现图像的无参考质量评价与分析评价。

    基于浅层密集连接网络的图像超分辨率重建方法

    公开(公告)号:CN110136060B

    公开(公告)日:2023-03-24

    申请号:CN201910332670.6

    申请日:2019-04-24

    Abstract: 本发明公开了一种基于浅层密集连接网络的单帧图像超分辨率重建方法,主要解决现有数字成像系统获得的图像分辨率低的问题;其实施过程为:首先通过跨层级联的方式构建密集连接块,而后堆叠两次密集连接块,构造密集连接网络;然后通过双三次下采样的方式取图像Y通道,构建训练数据集和测试数据集,并通过训练数据训练浅层连接网络;使用平均绝对误差作为网络的损失函数,判定网络训练是否达到要求;最后使用测试集,通过已训练好的网络进行图像超分辨率重建;本发明通过浅层密集连接网络,能更加有效地利用特征图,最终重构的超分辨率图像保留了更丰富的细节和更清晰地边缘轮廓,可用于天气状况预测、公安部门刑侦破案、电视显示器清晰度提升。

    基于自注意图像编码的无参考图像质量评价方法

    公开(公告)号:CN113222032B

    公开(公告)日:2023-03-10

    申请号:CN202110546001.6

    申请日:2021-05-19

    Abstract: 本发明提出了一种基于自注意图像编码的无参考图像质量评价方法,其步骤为:获取训练样本集和测试样本集;构建基于自注意图像编码的无参考图像质量评价网络模型;对基于自注意图像编码的无参考图像质量评价网络模型进行迭代训练;获取无参考图像质量评价结果。本发明所构建的无参考图像质量评价网络模型中的自注意图像编码器通过对每个样本低维映射的特征进行自注意编码,全连接层对每个特征进行自注意编码得到的包含图像整体注意力信息和细节的深度感知特征进行回归,以获取每个样本对应的质量预测分数,避免了现有技术中所获取的感知特征缺乏足够深度的图像整体注意力信息和细节对评价精度的影响,有效地提高了无参考图像的质量评价精度。

    基于时域金字塔的无参考视频质量评价方法

    公开(公告)号:CN113486821A

    公开(公告)日:2021-10-08

    申请号:CN202110782615.4

    申请日:2021-07-12

    Abstract: 本发明公开了一种基于时域金字塔的无参考视频质量评价方法,主要解决现有技术利用时域信息不充分,导致视频质量评价准确度较低的问题。其实现方案是:获取训练集和测试集;从视频中获取帧组,并对其进行特征提取,获得低、高层视频特征;构建由时域金字塔模块和质量融合模块级联组成的质量评价网络;对质量评价网络进行训练;将测试视频样本输入到训练好的质量评价网络中,得到被测视频的预测质量分数。本发明通过用时域金字塔模块获取时域信息形成金字塔特征,将视频帧间信息进行交互,并作不同方式的采样,提升了来自视频的时域信息的丰富度,充分利用了视频的时域信息,提高了视频质量评价的准确度,可用于图像的采集、管理、传输和处理。

Patent Agency Ranking