公开(公告)号：CN117238034A

公开(公告)日：2023-12-15

申请号：CN202311322501.7

申请日：2023-10-13

Applicant: 南昌大学

Inventor： 苏鹏翔 ,  盖迪 ,  饶泓 ,  鲁文博 ,  刘璇 ,  封润洋

IPC: G06V40/20 ,  G06V20/40 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464

Abstract: 本发明公开了一种基于时空Transformer的人体姿态估计方法，使用个性化特征提取模块提取和调整单个帧特征以适应不同的人体形状，并整合单帧特征以获得时空特征；通过目标帧特征优化模块对目标帧自身信息建立相关空间线索建模，以获得细化特征；应用交叉时间特征提取模块从全局时空特征中搜索与含有目标帧信息的局部特征最密切相关的信息，利用浅层细节和深层语义表示加强目标帧与短视频序列特征之间的交互作用；采用解耦合关键点检测器提取每个关键点的差异性特征并对人体结构对进行编码，辅助模型合理准确地估计出关键点热图。所述方法能够编码时空相关信息，降低由于特征缺失或模糊带来的干扰，有效提升视频中人体姿态估计的准确性。