公开(公告)号：CN118427360A

公开(公告)日：2024-08-02

申请号：CN202410521557.3

申请日：2024-04-28

Applicant: 同济大学

Inventor： 郭玉臣 ,  郭晓潞 ,  林子然 ,  蒋思齐

IPC: G06F16/36 ,  G06F16/33 ,  G06F40/284 ,  G06N20/00

Abstract: 本发明涉及一种基于深度学习与图论的水泥领域文本实体‑关系联合抽取方法、装置及存储介质，其中方法包括：步骤S1：对输入的自然语言文本进行词嵌入处理得到词序列；步骤S2：提取每个单词的特征向量；步骤S3：对于每个单词，分别生成其他单词作用于该单词的第一权重；步骤S4：生成其他单词作用于单词的第二权重，并将第一权重和第二权重求和得到其他单词作用于该单词的权重初值；步骤S5：基于由各单词对其他单词的权重初值形成初始邻接矩阵；步骤S6：对各单词的特征向量进行增强处理，计算注意力分数并修改初始邻接矩阵得到目标邻接矩阵；步骤S7：基于得到的目标邻接，得到融合有邻接节点信息的特征向量；步骤S8：将子序列首尾两个单词的特征向量作为子序列的特征；步骤S9：将两个子序列的特征输入至分析模型中得到两个子序列的关系。与现有技术相比，本发明具有准确率高等优点。

公开(公告)号：CN117011750A

公开(公告)日：2023-11-07

申请号：CN202310381552.0

申请日：2023-04-11

Applicant: 同济大学

Inventor： 郭玉臣 ,  郭晓潞 ,  解博涵 ,  汪诗蕊 ,  林子然

IPC: G06V20/40 ,  G10L15/26 ,  G10L15/197 ,  G10L15/16 ,  G10L15/14 ,  G10L25/24 ,  G06V20/62 ,  G06V10/80 ,  G06F18/22

Abstract: 本发明涉及一种多模态的水泥材料视频信息采集方法，包括以下步骤：S1：获取视频，将获取的视频进行音频与画面的分离，得到对应的音频文件和画面文件；S2：将音频文件输入语音识别模型，得到音频文件对应的音频文本；S3：提取画面文件中的关键帧，识别关键帧中的文本信息，得到画面文件对应的画面文本；S4：将得到的音频文本和画面文本进行融合，得到获取的视频信息对应的文本信息。与现有技术相比，本发明具有高效方便等优点。