一种大语言模型逻辑冲突检测能力的评估方法与装置

    公开(公告)号:CN119621516A

    公开(公告)日:2025-03-14

    申请号:CN202510153294.X

    申请日:2025-02-12

    Abstract: 本发明公开了一种大语言模型逻辑冲突检测能力的评估方法与装置,属于大语言模型技术领域,所述方法包括:根据包含逻辑冲突的本体总结逻辑冲突模式;基于逻辑冲突模式与相应本体构建正例数据集和负例数据集;将正例数据集和负例数据集分别与预先设计的多种不同类型的逻辑冲突检测提示词相结合,对大语言模型进行提问;根据对大语言模型的测试结果,对大语言模型的逻辑冲突判断与解释能力进行评估;本发明考虑了逻辑冲突的模式以及逻辑推理的规则,可更好地理解复杂的语境,提高逻辑冲突检测的准确性。

Patent Agency Ranking