-
公开(公告)号:CN119625338A
公开(公告)日:2025-03-14
申请号:CN202411684939.4
申请日:2024-11-22
Applicant: 北京邮电大学
IPC: G06V10/44 , G06V10/80 , G06V10/764 , G06V10/82 , G06N3/0464 , G06N3/08
Abstract: 本发明提供了一种融合多模态美学和属性特征的图像美学评估方法。所述方法包括:构造图像‑美学以及图像‑属性文本对数据;构建联合属性和美学描述的多模态预训练模型;利用冻结的图像编码器与条件编码器提取原始图像特征与条件特征;利用文本解码器生成匹配条件特征的美学或属性文本;最小化生成文本与目标文本差异得到预训练模型;获取并处理图像和美学评分数据,构建融合多模态美学和属性特征的美学评分模型;提取并融合图像的属性和美学特征得到属性感知的美学特征;将该特征通过线性层映射得到美学分数;利用均方误差函数优化模型参数,得到最终的美学评分模型;本发明不仅能获得能准确的美学评分,而且在推理阶段仅需要单张图像。