公开(公告)号：CN119169701A

公开(公告)日：2024-12-20

申请号：CN202411322456.X

申请日：2024-09-23

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 赵毅 ,  王一峰 ,  包益欣 ,  董显昊 ,  师孟笛

IPC: G06V40/20 ,  G06V10/46 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0442 ,  G06N3/08

Abstract: 本申请公开了一种基于单目相机的三维运动捕捉与智能分析系统及方法，涉及图像处理技术领域，该系统包括输入与预处理模块、特征提取与交互融合模块、人体关键点检测模块、三维姿态重建模块和智能分析模块；通过构建多尺度特征金字塔结构，系统能够在不同分辨率下对特征进行细化处理得到下采样特征图，通过将Mamba模型应用于人体运动捕捉系统中，Mamba模型在时间序列中自适应融合多尺度特征，通过卷积与上采样操作生成融合后的多尺度特征图。提高了关键点检测的精度与稳健性；通过xLSTM模型结合前后帧图像的关键点信息，平滑处理关键点序列，确保了关键点检测的时间一致性和连贯性，进一步提高了人体姿态检测的准确性和稳定性。