Invention Publication
- Patent Title: 一种基于开放词汇检测的高速公路抛洒物检测与分类方法
-
Application No.: CN202410349437.XApplication Date: 2024-03-26
-
Publication No.: CN118196726APublication Date: 2024-06-14
- Inventor: 蒲自源 , 柳思文 , 庄一帆 , 王翔 , 王健 , 曾冰
- Applicant: 东南大学
- Applicant Address: 江苏省南京市玄武区四牌楼2号
- Assignee: 东南大学
- Current Assignee: 东南大学
- Current Assignee Address: 江苏省南京市玄武区四牌楼2号
- Agency: 上海科盛知识产权代理有限公司
- Agent 陈天宝
- Main IPC: G06V20/54
- IPC: G06V20/54 ; G06V20/70 ; G06V10/25 ; G06V10/26 ; G06V10/40 ; G06V10/74 ; G06V10/764 ; G06V10/82 ; G06F40/30 ; G06F40/247 ; G06F18/22 ; G06N3/0455 ; G06N3/096

Abstract:
本发明涉及一种基于开放词汇检测的高速公路抛洒物检测与分类方法,包括以下步骤:根据常见抛洒物类型,构建针对高速公路抛洒物的开放词汇列表;对图像进行分割处理,根据计算的掩码大小,判断并获取抛洒物的潜在目标区域,提取过程中,基于SAM模型,对包含抛洒物的图像进行处理,提取所有可能包含抛洒物的目标区域;通过对比性语言‑图像预训练模型,匹配潜在目标区域的视觉嵌入与开放词汇列表的文本嵌入,通过计算置信度指标,从潜在目标区域中精准提取出抛洒物目标,并通过计算相似度指标,对提取后的每个抛洒物进行分类。与现有技术相比,本发明能显著降低对数据量的需求,具有更好的泛化能力及鲁棒性。
Information query