-
公开(公告)号:CN112183334B
公开(公告)日:2024-03-22
申请号:CN202011038812.7
申请日:2020-09-28
Applicant: 南京大学
Abstract: 一种基于多模态特征融合的视频深度关系分析方法,基于视频分幕和场景、人物识别的视觉、声音和文字特征融合网络,首先将输入视频根据场景、视觉和声音模型分为多个幕,并在每个幕上提取对应的声音和文字特征,然后根据输入的场景截图和人物截图识别出现在各幕中的位置,并对场景和人物提取对应的实体视觉特征,同时对每两个实体对计算联合区域的视觉特征;对于每个实体对,将幕特征、实体特征和实体对特征连接后通过小样本学习结合零样本学习预测每幕实体对间的关系,通过合并视频每幕上的实体关系,构建整个视频上的实体关系图。本发明利用实体关系图可以回答知识图填充、问题回答和实体关系路径三类深度视频分析问题。
-
公开(公告)号:CN112183334A
公开(公告)日:2021-01-05
申请号:CN202011038812.7
申请日:2020-09-28
Applicant: 南京大学
Abstract: 一种基于多模态特征融合的视频深度关系分析方法,基于视频分幕和场景、人物识别的视觉、声音和文字特征融合网络,首先将输入视频根据场景、视觉和声音模型分为多个幕,并在每个幕上提取对应的声音和文字特征,然后根据输入的场景截图和人物截图识别出现在各幕中的位置,并对场景和人物提取对应的实体视觉特征,同时对每两个实体对计算联合区域的视觉特征;对于每个实体对,将幕特征、实体特征和实体对特征连接后通过小样本学习结合零样本学习预测每幕实体对间的关系,通过合并视频每幕上的实体关系,构建整个视频上的实体关系图。本发明利用实体关系图可以回答知识图填充、问题回答和实体关系路径三类深度视频分析问题。
-
公开(公告)号:CN202346839U
公开(公告)日:2012-07-25
申请号:CN201120525501.3
申请日:2011-12-15
Applicant: 南京大学 , 环境保护部南京环境科学研究所
IPC: C02F3/32
Abstract: 本实用新型公开了一种铰链式浮动床,属于生态环境保护技术领域。其包括竹木框架、编织网、废轮胎、竹木铰链,所述竹木框架中设有固定水生植物的编织网,竹木框架通过废轮胎连接在一起,竹木框架的一端通过竹木铰链固定在岸坡上。本实用新型能够通过铰链式的灵活变动满足水位变化较大的水体的净化要求,实现水体的净化和美化的双重效果,以竹木、废轮胎为材料,不仅造价低廉,而且运行效果良好,同时体现了绿色环保的理念。
-
-