自然语言处理中分类标注的冲突检测方法、装置和设备
Abstract:
本申请提供了一种自然语言处理中分类标注的冲突检测方法、装置、设备和存储介质,获取待检测的标注语句集;将待检测的标注语句集中任意两个语句输入至相似度检测模型,以计算出两个语句的相似度值;其中相似度检测模型是采用语句样本数据对孪生网络模型或双塔网络模型进行训练得到的;当相似度值大于或等于预设阈值时,判断两个语句的分类标注是否相同;当两个语句的分类标注不相同时,则判定两个语句为第一分类标注冲突语句。该方法一方面能快速地确定标注冲突语句。另一方面在计算语句相似度时采用的相似度检测模型由孪生网络模型或双塔网络模型训练得到的,该模型能大大提高相似度计算的准确性,从而提高了检测结果的准确性。
Patent Agency Ranking
0/0