公开(公告)号：CN119445260B

公开(公告)日：2025-04-25

申请号：CN202510026265.7

申请日：2025-01-08

Applicant: 中国科学技术大学

Inventor： 刘淇 ,  冯彬 ,  阮书岚 ,  杨明政

IPC: G06V10/764 ,  G06V10/80

Abstract: 本发明提供一种图像情感分析方法及装置、存储介质及电子设备，属于图像分析领域，该方法包括：确定目标图像的元数据集合，包括描述文本信息和标签信息；对标签信息进行语义描述形式转换，获得标签描述信息；对目标图像、描述文本信息和标签描述信息进行统一表征，得到元数据特征和图像特征；对元数据特征和图像特征进行信息增强，得到元数据增强特征和图像增强特征；对元数据增强特征和图像增强特征进行跨模态特征融合处理，获得目标图像的融合特征；基于融合特征进行情感识别，得到目标图像的情感类别。应用本发明的方法，可利用图像的元数据特征和视觉特征对图像呈现的情感进行多维度分析，有利于提高图像情感识别的准确性。

公开(公告)号：CN116150407A

公开(公告)日：2023-05-23

申请号：CN202310443200.3

申请日：2023-04-24

Applicant: 中国科学技术大学

Inventor： 刘淇 ,  冯彬 ,  阮书岚 ,  陈恩红

IPC: G06F16/36

Abstract: 本发明公开了一种基于种子集扩展的领域知识图谱构建方法及系统。该方法包括：获取与目标专业领域相关的至少一个初始文档，并对至少一个初始文档进行格式整理和文档合并处理，得到初始种子集文件，其中，初始文档中包括知识点数据；对初始种子集文件进行去重处理，并对去重处理后的初始种子集文件中的知识点数据进行数据预处理，得到知识对格式的文件；根据知识对格式的文件，通过遍历检索的方式提取通用知识图谱中的包含知识点实体的三元组，得到具有知识‑实体‑知识的多个子图；对多个子图进行数据清洗和数据筛选，并将处理后多个子图进行图谱合并处理，生成目标专业领域的知识图谱。

公开(公告)号：CN119445260A

公开(公告)日：2025-02-14

申请号：CN202510026265.7

申请日：2025-01-08

Applicant: 中国科学技术大学

Inventor： 刘淇 ,  冯彬 ,  阮书岚 ,  杨明政

IPC: G06V10/764 ,  G06V10/80

Abstract: 本发明提供一种图像情感分析方法及装置、存储介质及电子设备，属于图像分析领域，该方法包括：确定目标图像的元数据集合，包括描述文本信息和标签信息；对标签信息进行语义描述形式转换，获得标签描述信息；对目标图像、描述文本信息和标签描述信息进行统一表征，得到元数据特征和图像特征；对元数据特征和图像特征进行信息增强，得到元数据增强特征和图像增强特征；对元数据增强特征和图像增强特征进行跨模态特征融合处理，获得目标图像的融合特征；基于融合特征进行情感识别，得到目标图像的情感类别。应用本发明的方法，可利用图像的元数据特征和视觉特征对图像呈现的情感进行多维度分析，有利于提高图像情感识别的准确性。

公开(公告)号：CN116401390B

公开(公告)日：2023-10-20

申请号：CN202310582432.7

申请日：2023-05-19

Applicant: 中国科学技术大学

Inventor： 刘淇 ,  冯彬 ,  阮书岚

IPC: G06F16/532 ,  G06F16/583 ,  G06F16/55 ,  G06V10/80 ,  G06V10/82 ,  G06V10/764 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/048 ,  G06N3/047 ,  G06N3/0475 ,  G06N5/04 ,  G06F40/30 ,  G06F16/36

Abstract: 本申请公开了一种视觉问答处理方法、系统、存储介质及电子设备，获取待处理图像，待处理图像为未进行特征提取的图像，通过预设提取网络，从待处理图像中提取视觉特征和语义特征，通过预设知识推理方式，对视觉特征和语义特征进行推理，得到显式知识增强表示和隐式知识增强表示，通过预设信息增强方式，对显式知识增强表示和隐式知识增强表示进行相互信息增强，得到显式特征表征和隐式特征表征，根据预设处理方式，对显式特征表征和隐式特征表征进行处理，得到概率分布向量，概率分布向量表征在视觉问答的过程中，所有候选答案中概率最大的分布向量。

公开(公告)号：CN116401390A

公开(公告)日：2023-07-07

申请号：CN202310582432.7

申请日：2023-05-19

Applicant: 中国科学技术大学

Inventor： 刘淇 ,  冯彬 ,  阮书岚

IPC: G06F16/532 ,  G06F16/583 ,  G06F16/55 ,  G06V10/80 ,  G06V10/82 ,  G06V10/764 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/048 ,  G06N3/047 ,  G06N3/0475 ,  G06N5/04 ,  G06F40/30 ,  G06F16/36

Abstract: 本申请公开了一种视觉问答处理方法、系统、存储介质及电子设备，获取待处理图像，待处理图像为未进行特征提取的图像，通过预设提取网络，从待处理图像中提取视觉特征和语义特征，通过预设知识推理方式，对视觉特征和语义特征进行推理，得到显式知识增强表示和隐式知识增强表示，通过预设信息增强方式，对显式知识增强表示和隐式知识增强表示进行相互信息增强，得到显式特征表征和隐式特征表征，根据预设处理方式，对显式特征表征和隐式特征表征进行处理，得到概率分布向量，概率分布向量表征在视觉问答的过程中，所有候选答案中概率最大的分布向量。