公开(公告)号：CN113722430A

公开(公告)日：2021-11-30

申请号：CN202110969283.0

申请日：2021-08-23

Applicant: 北京工业大学

Inventor： 吕龙龙 ,  张永恒 ,  庞俊彪 ,  黄庆明 ,  尹宝才

IPC: G06F16/33 ,  G06F16/36 ,  G06K9/62 ,  G06N3/04 ,  G16H20/60 ,  G06F3/0481

Abstract: 本发明涉及一种面向食品安全的多模态人机交互方法和系统、电子设备及存储介质。该方法包括：获取用于生成多模态食品安全知识图谱的相关多模态数据源；针对所述多模态数据源，利用文档处理方法、图像识别工具以及知识抽取工具抽取多模态数据的信息，获得多模态食品安全知识；基于所述食品安全知识，生成所述多模态食品安全知识图谱；以及构建多模态人机交互系统，并基于所述多模态食品安全知识图谱实现对多模态数据的人机交互。本发明将现有的多模态食品安全数据整理并生成食品安全知识图谱，实现针对多模态数据的人机交互，能够更好的展示食品安全信息，从而替代食品安全领域专家的知识，实现食品安全领域的智能化。