公开(公告)号：CN114943452A

公开(公告)日：2022-08-26

申请号：CN202210574109.0

申请日：2022-05-24

Applicant: 杭州电子科技大学上虞科学与工程研究院有限公司

Inventor： 胡海洋 ,  张敏 ,  李忠金

IPC: G06Q10/06

Abstract: 本发明公开了一种基于双流结构增强型检测器的工作流检测方法。本发明以双流结构的方式把表征检测器和运动检测器结合在一起，预测帧上出现的运动目标。同时，在检测器中引入带有特征对齐特性的锚框改进子模块，根据在各帧上检测到的候选框输出适变的锚框立方体。为了提高运动目标的捕获能力，检测器中应用分层聚合策略提升模型中间层特征图的区分度。另外，使用层正则化减少检测器内部层之间的内部协变量偏移现象，促使整个训练过程更加高效稳定。最后，基于提取出的显著性特征，利用空时域动作管道生成分支完成生产操作行为的分类和定位回归。本发明可部署到工厂生产场景中，实时检测生产操作全过程，实现对工人的生产操作行为检测。

公开(公告)号：CN114942620A

公开(公告)日：2022-08-26

申请号：CN202210571876.6

申请日：2022-05-24

Applicant: 杭州电子科技大学上虞科学与工程研究院有限公司

Inventor： 胡海洋 ,  张敏 ,  李忠金

IPC: G05B19/418

Abstract: 本发明公开了一种基于提名图注意力网络的工作流识别方法。本发明首先应用动作提名方法产生候选视频片段，然后基于这些视频片段表示为节点，构建具体的图模型。为了增强模型的特征表示能力，引入类内和类间两种注意力机制，分别学习用于不断更新图结点矩阵的长时依赖信息和迭代图邻接矩阵的自适应性依赖信息。最后，基于构建的图执行图卷积操作，实现工作流分类和工序操作边界定位回归。本发明可应用于产品生产加工过程中各工序的准确识别和时序定位，进而规范生产操作行为过程，对出现的危险操作或偏离正常操作模式时及时预警，确保生产安全、稳定、有序进行。