一种融合知识图谱与图像识别的垃圾分类方法

    公开(公告)号:CN117456279A

    公开(公告)日:2024-01-26

    申请号:CN202311623115.1

    申请日:2023-11-30

    Abstract: 本发明公开了一种融合知识图谱与图像识别的垃圾分类方法,包括:1、构建知识图谱,捕捉垃圾实体与种类之间的关系2、利用Ac自动机树,提取问题中的垃圾实体名;3、利用TransR模型提取垃圾实体的文本向量;4、设定疑问词列表,提取问题中的疑问词,根据疑问词是否在疑问词列表中和问题中是否有垃圾实体名来对问题进行分类;5、针对不同类型的问题,返回不同的答案模板;6、构建图像识别模型,获取垃圾图片的向量;7、将垃圾实体的文本向量和图片向量,结合注意力机制将相互对应的向量进行拼接,得到垃圾实体的融合向量后,最终返回垃圾的类别。本发明融合了知识图谱和图像识别,能更稳定、更便捷、更高效的实现垃圾分类。

    一种融合知识图谱与图像识别的垃圾分类方法

    公开(公告)号:CN117456279B

    公开(公告)日:2025-04-22

    申请号:CN202311623115.1

    申请日:2023-11-30

    Abstract: 本发明公开了一种融合知识图谱与图像识别的垃圾分类方法,包括:1、构建知识图谱,捕捉垃圾实体与种类之间的关系2、利用Ac自动机树,提取问题中的垃圾实体名;3、利用TransR模型提取垃圾实体的文本向量;4、设定疑问词列表,提取问题中的疑问词,根据疑问词是否在疑问词列表中和问题中是否有垃圾实体名来对问题进行分类;5、针对不同类型的问题,返回不同的答案模板;6、构建图像识别模型,获取垃圾图片的向量;7、将垃圾实体的文本向量和图片向量,结合注意力机制将相互对应的向量进行拼接,得到垃圾实体的融合向量后,最终返回垃圾的类别。本发明融合了知识图谱和图像识别,能更稳定、更便捷、更高效的实现垃圾分类。

Patent Agency Ranking