移动场景下基于视频生成毫米波雷达数据的方法及装置

    公开(公告)号:CN116704002A

    公开(公告)日:2023-09-05

    申请号:CN202310725723.7

    申请日:2023-06-19

    Abstract: 本发明公开了一种移动场景下基于视频生成毫米波雷达数据的方法及装置,属于毫米波雷达移动感知领域,包括人体网格提取与校准和反射与噪声信号估计两个组件。人体网格提取与校准组件,用于准确估计相机和人的真实位置,包括模糊和抖动过滤器、人体网格提取模块、相机姿态估计模块和人体位置校准模块;反射与噪声信号估计组件,用于模拟雷达信号的多径反射与衰减以及背景噪声,包括深度预测模型、反射模型、时空噪声估计模块和U‑Net网络模块。本发明利用丰富的动态视频数据生成大量逼真的、可转换的动态毫米波雷达数据,包括多普勒数据和点云数据,有效解决了移动场景中毫米波雷达数据不足的问题,可应用于动作识别、目标检测等应用中。

    面向车路协同自动驾驶的毫米波雷达点云配准方法及装置

    公开(公告)号:CN116721135A

    公开(公告)日:2023-09-08

    申请号:CN202310715862.1

    申请日:2023-06-16

    Abstract: 本发明公开了一种面向车路协同自动驾驶的毫米波雷达点云配准方法及装置,属于点云配准领域。本发明利用摄像机和毫米波雷达的互补优势,实现车辆‑基础设施稀疏无序的3D雷达点云的准确配准,解决了稀疏无序雷达点云语义特征难提取及点对难对应的问题。同时设计自适应调度策略,考虑车辆的触发因素和基础设施视野内点云的变化程度来自适应触发数据请求,以确保多车‑基础设施之间实时的配准。本发明将车辆和基础设施的摄像机数据和雷达点云数据作为输入并最终完成点云配准,同时满足毫米波雷达点云配准的实时性和准确性,实现了在大雾天气下,对车辆感知范围和感知精度的提升,并支持毫米波雷达在目标检测、路径规划等应用上性能的进一步提高。

    一种面向移动场景手势识别的毫米波雷达数据生成方法

    公开(公告)号:CN119380410A

    公开(公告)日:2025-01-28

    申请号:CN202411479856.1

    申请日:2024-10-23

    Abstract: 本发明提供一种面向移动场景手势识别的毫米波雷达数据生成方法,其特征在于,包括:动态数据生成网络(人体‑相机位置估计器、深度预测模型、背景反射提取器、人体反射模型和数据拟合模型)和动态手势识别网络(空间特征提取模块和全局特征融合模块)两个单元架构,通过动态数据生成网络生成的大规模逼真的雷达数据,训练动态手势识别网络架构,利用动态视频数据来生成动态的毫米波雷达手势数据,提出适用于移动场景的毫米波雷达手势识别模型;解决了移动场景中背景和人的复杂反射特性难模拟问题、手势特征难提取问题;实现移动场景下普适的手势识别,有效扩充了毫米波雷达数据集,降低数据收集的成本,拓宽了移动场景下无线传感的潜在应用。

    一种面向手势识别的细粒度毫米波雷达数据生成方法

    公开(公告)号:CN118379580A

    公开(公告)日:2024-07-23

    申请号:CN202410480166.1

    申请日:2024-04-22

    Abstract: 一种面向手势识别的细粒度毫米波雷达数据生成方法,属于毫米波雷达感知领域,包括:提取人体组成部位、2D骨骼点坐标和深度信息;根据深度信息将2D骨骼点转换成3D骨骼点;对其进行扩充生成手势运动反射点;根据反射点计算出每个手势运动反射点相对于雷达的RCS和径向速度;输入深度信息和RCS来模拟雷达信号的传播特性并输出人体反射强度图;将其与径向速度拼接成雷达数据;利用编码‑解码模型生成逼真的雷达数据;采用损失函数来衡量生成和真实的雷达数据在数量和分布上的相关性;用生成和真实数据混合训练手势识别模型。本发明有效解决了细粒度毫米波雷达数据不足及多样化、细粒度手势反射特征难模拟的问题,降低了数据采集成本。

Patent Agency Ranking