基于transformer的驾驶员分心检测方法及装置

    公开(公告)号:CN114511798B

    公开(公告)日:2024-04-26

    申请号:CN202111509227.5

    申请日:2021-12-10

    Abstract: 本发明提供了一种基于transformer的驾驶员分心检测方法及装置,属于驾驶行为分析领域,包括采集分心驾驶图像数据;搭建驾驶员分心检测模型FPT;将采集到的分心驾驶图像数据输入驾驶员分心检测模型FPT中,利用驾驶员分心检测模型FPT对分心驾驶图像数据进行分析,根据分析结果判断驾驶员分心状态。本发明在Swin,Twins等模型的基础上提出一种新的网络模型驾驶员分心检测模型FPT,该这种模型与深度学习模型相比弥补了深度学习模型只能提取局部特征的缺点,与变压器transformer模型相比,提高了分类的精度,并且降低了参数量和运算量;对整个网络的损失函数进行了调整,在交叉熵损失函数的基础上添加了标签平滑,增加分类的准确度,有效抑制过拟合,提高了检测精度。

    基于transformer的驾驶员分心检测方法及装置

    公开(公告)号:CN114511798A

    公开(公告)日:2022-05-17

    申请号:CN202111509227.5

    申请日:2021-12-10

    Abstract: 本发明提供了一种基于transformer的驾驶员分心检测方法及装置,属于驾驶行为分析领域,包括采集分心驾驶图像数据;搭建驾驶员分心检测模型FPT;将采集到的分心驾驶图像数据输入驾驶员分心检测模型FPT中,利用驾驶员分心检测模型FPT对分心驾驶图像数据进行分析,根据分析结果判断驾驶员分心状态。本发明在Swin,Twins等模型的基础上提出一种新的网络模型驾驶员分心检测模型FPT,该这种模型与深度学习模型相比弥补了深度学习模型只能提取局部特征的缺点,与变压器transformer模型相比,提高了分类的精度,并且降低了参数量和运算量;对整个网络的损失函数进行了调整,在交叉熵损失函数的基础上添加了标签平滑,增加分类的准确度,有效抑制过拟合,提高了检测精度。

    一种基于无监督学习的驾驶员分心细粒度检测方法

    公开(公告)号:CN114187581B

    公开(公告)日:2024-04-09

    申请号:CN202111527027.2

    申请日:2021-12-14

    Abstract: 本发明提供了一种基于无监督学习的驾驶员分心细粒度检测方法,属于驾驶行为分析领域,包括:采集分心驾驶图像数据;将采集到的分心驾驶图像数据输入无监督学习检测模型中,利用无监督学习检测模型对分心驾驶图像数据进行分析,根据分析结果判断驾驶员分心状态;无监督学习检测模型包括骨干网络、投影头和损失函数;骨干网络为融入多层感知机MLP的RepMLP网络结构;投影头为将融入残差结构的多层感知机MLP;损失函数为基于对比学习和stop‑gradient策略的损失函数。本发明弥补了传统卷积层所堆积的CNN模型全局感知能力较差的问题,具备了较强的局部感知能力及良好的全局感知性能,可以使无监督学习检测模型对应用场景的泛化能力得到了加强。

    一种基于无监督学习的驾驶员分心细粒度检测方法

    公开(公告)号:CN114187581A

    公开(公告)日:2022-03-15

    申请号:CN202111527027.2

    申请日:2021-12-14

    Abstract: 本发明提供了一种基于无监督学习的驾驶员分心细粒度检测方法,属于驾驶行为分析领域,包括:采集分心驾驶图像数据;将采集到的分心驾驶图像数据输入无监督学习检测模型中,利用无监督学习检测模型对分心驾驶图像数据进行分析,根据分析结果判断驾驶员分心状态;无监督学习检测模型包括骨干网络、投影头和损失函数;骨干网络为融入多层感知机MLP的RepMLP网络结构;投影头为将融入残差结构的多层感知机MLP;损失函数为基于对比学习和stop‑gradient策略的损失函数。本发明弥补了传统卷积层所堆积的CNN模型全局感知能力较差的问题,具备了较强的局部感知能力及良好的全局感知性能,可以使无监督学习检测模型对应用场景的泛化能力得到了加强。

    一种单阶段细粒度轻量化点云3D目标检测系统及方法

    公开(公告)号:CN116664874B

    公开(公告)日:2023-10-20

    申请号:CN202310960023.6

    申请日:2023-08-02

    Abstract: 本申请公开了一种单阶段细粒度轻量化点云3D目标检测系统及方法,其中系统包括:点云特征编码模块、体素特征提取模块、BEV特征提取模块和检测模块;点云特征编码模块用于对输入的点云数据进行体素化,并对每个体素中的点云特征进行编码,得到编码后特征;体素特征提取模块用于对编码后特征进行体素特征提取,得到体素特征;BEV特征提取模块基于体素特征进行特征转化提取,得到BEV特征;检测模块基于BEV特征进行目标检测。本申请体素特征的提取比传统的稀疏卷积网络更快更准确,尽可能保持原始点云特征的完整性和稀疏性,使提取的点云特征具有一定的细粒度;构建的BEV特征提取模块可以非常有效地提取细粒度BEV特征。

Patent Agency Ranking