-
公开(公告)号:CN113822172B
公开(公告)日:2024-06-14
申请号:CN202111017499.3
申请日:2021-08-30
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种视频时空行为检测方法,包括:截取视频图像;检测视频片段中间帧中的所有可能的目标对象及其边框信息,以及提取视频上下文特征和目标对象特征;获取目标对象特征对于上下文特征的依赖,根据依赖更新目标对象特征;根据目标对象特征的最终结果值生成多个行为特征形成的集合;获取各行为特征间的依赖,根据依赖更新行为特征集合;利用行为特征的更新值预测每个目标对象的各行为概率。本发明的视频时空行为检测方法通过获取上下文依赖来更新更新目标对象特征,并且利用行为特征之间的依赖更新行为特征集合,可以提高视频行为检测的准确率。
-
公开(公告)号:CN112749660A
公开(公告)日:2021-05-04
申请号:CN202110044445.X
申请日:2021-01-13
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请涉及一种视频内容描述信息的生成方法和设备,该方法包括:获取目标视频的图像序列;将图像序列划分为多个子图像序列;多个子图像序列中任意连续两个子图像序列对应不同的场景;针对多个子图像序列中每个子图像序列:根据已训练的第一检测模型对当前子图像序列的首帧图像进行检测,得到对应的静态场景描述信息;根据已训练的第二检测模型对当前子图像序列中除首帧图像之外的图像进行检测,得到对应的动态事件描述信息;根据静态场景描述信息和动态事件描述信息,确定当前子图像序列对应的内容描述信息。如此,不仅可以降低视频理解的难度,还可以减少冗余信息提取,从而可以提高计算效率。
-
公开(公告)号:CN112749660B
公开(公告)日:2024-06-28
申请号:CN202110044445.X
申请日:2021-01-13
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请涉及一种视频内容描述信息的生成方法和设备,该方法包括:获取目标视频的图像序列;将图像序列划分为多个子图像序列;多个子图像序列中任意连续两个子图像序列对应不同的场景;针对多个子图像序列中每个子图像序列:根据已训练的第一检测模型对当前子图像序列的首帧图像进行检测,得到对应的静态场景描述信息;根据已训练的第二检测模型对当前子图像序列中除首帧图像之外的图像进行检测,得到对应的动态事件描述信息;根据静态场景描述信息和动态事件描述信息,确定当前子图像序列对应的内容描述信息。如此,不仅可以降低视频理解的难度,还可以减少冗余信息提取,从而可以提高计算效率。
-
公开(公告)号:CN113822172A
公开(公告)日:2021-12-21
申请号:CN202111017499.3
申请日:2021-08-30
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种视频时空行为检测方法,包括:截取视频图像;检测视频片段中间帧中的所有可能的目标对象及其边框信息,以及提取视频上下文特征和目标对象特征;获取目标对象特征对于上下文特征的依赖,根据依赖更新目标对象特征;根据目标对象特征的最终结果值生成多个行为特征形成的集合;获取各行为特征间的依赖,根据依赖更新行为特征集合;利用行为特征的更新值预测每个目标对象的各行为概率。本发明的视频时空行为检测方法通过获取上下文依赖来更新更新目标对象特征,并且利用行为特征之间的依赖更新行为特征集合,可以提高视频行为检测的准确率。
-
-
-