公开(公告)号：CN115687638A

公开(公告)日：2023-02-03

申请号：CN202211199819.6

申请日：2022-09-29

申请人： 中国科学院计算技术研究所

发明人： 程学旗 ,  靳小龙 ,  郭嘉丰 ,  王炫力 ,  席鹏弼 ,  廖华明

IPC分类号： G06F16/36 ,  G06F40/211 ,  G06F40/289 ,  G06N3/0455 ,  G06N3/044 ,  G06N3/048 ,  G06N3/047 ,  G06N3/08

摘要： 本发明提出一种基于三元组森林的实体关系联合抽取方法和系统，包括：获取待实体关系抽取的语料，得到句子及其对应的词序列；将词序列输入BERT模型，BERT模型对词序列进行分词，得到子词序列，使用BERT模型对子词序列进行编码，得到句子的分布式表示；将分布式表示输入CRF模型，标注句子中实体，得到实体的向量表示；将实体向量输入，通过TransformerDecoder模块中多头注意力机制获得实体向量中包含的实体间交互信息、实体和输入句子间交互信息的隐层向量；将隐层向量作为Tree‑RNN的初始状态和初始隐层单元，输入实体表示至Tree‑RNN，从Tree‑RNN的根节点的头实体生成其所参与的关系，根据头实体及其对应的关系，选择其尾实体，从而生成重叠的三元组树，再进一步解码得到实体关系三元组。

公开(公告)号：CN115934953A

公开(公告)日：2023-04-07

申请号：CN202211199328.1

申请日：2022-09-29

申请人： 中国科学院计算技术研究所

发明人： 靳小龙 ,  郭嘉丰 ,  程学旗 ,  王炫力 ,  席鹏弼 ,  廖华明

IPC分类号： G06F16/36 ,  G06F40/30 ,  G06F40/289 ,  G06N3/0455 ,  G06N3/044 ,  G06N3/047 ,  G06N3/048 ,  G06N3/08

摘要： 本发明提出一种基于实体森林的实体语义关系联合抽取方法和系统，包括：获取待识别实体语义关系的语料；得到句子及其对应的词序列，对句子的词序列进行编码，得到训练语料中句子的分布式表示；句子的分布式表示进行序列标注，得到实体头部，作为实体树的根节点，以根节点为循环神经网络模型的初始状态，依次输入句子中子词至循环神经网络模型，以森林的形式识别嵌套实体，得到多棵嵌套实体树；将嵌套实体树的实体表示输入Transformer Decoder模块，通过多头注意力机制，得到嵌套实体树中包含实体树间交互信息、实体和输入文本之间的交互信息的隐层向量；将隐层向量和实体表示输入由多棵嵌套实体树构成的分层三元组森林，获得语料的实体语义关系三元组。