一种基于深度强化学习的无人车竞速控制器的设计方法

    公开(公告)号:CN118605267A

    公开(公告)日:2024-09-06

    申请号:CN202410689853.4

    申请日:2024-05-30

    Abstract: 本发明公开了一种基于深度强化学习的无人车竞速控制器的设计方法。该方法包括:通过预训练的离散变分自编码器对环境的状态信息进行特征提取,降低原始RGB相机图像数据的维度;将GRU融入TQC算法策略网络与价值网络的特征层,提取环境状态信息的时域特征,使算法可以处理因系统延迟导致的部分可观测马尔可夫决策问题;使用循环经验回放为经验序列增加额外的烧录过程,解决不良GRU初始隐藏状态对算法收敛稳定性的影响;使用概率组合优先经验回放为新经验提供额外的回放机制,提升新经验的采样概率,加速无人车竞速算法的收敛。将收敛后算法的策略网络做为无人车竞速控制器,实验结果表明,该控制器可以高效控制无人车进行绕圈竞速。

    一种智能钥匙柜系统
    22.
    发明公开

    公开(公告)号:CN112258694A

    公开(公告)日:2021-01-22

    申请号:CN201910657777.8

    申请日:2019-07-20

    Abstract: 本发明公开了一种智能钥匙柜系统,移动客户端用于向业务服务器发送开柜请求;业务服务器用于响应于移动客户端的开柜请求,向智能钥匙柜发送开柜指令,并接收智能钥匙柜回传的开门状态信息,将钥匙借用记录添加至数据库留存,并定期向智能钥匙柜发送最新的钥匙借用记录。数据库用于保存用户信息、智能钥匙柜的配置信息以及钥匙取用记录;智能钥匙柜用于响应于开柜指令进行开柜。本发明操作方便简洁,用户扫码便可打开柜门取用钥匙,提升工作效率。

    智慧公车管理系统
    23.
    发明公开

    公开(公告)号:CN112258134A

    公开(公告)日:2021-01-22

    申请号:CN201910657773.X

    申请日:2019-07-20

    Abstract: 本发明公开了一种智慧公车管理系统包括人员管理模块、用车管理模块、用卡管理模块、记录查询模块、车辆养护模块、异常报警模块以及数据分析模块。车辆的使用和油卡的使用进行了统一管理,在车辆和油卡的使用上,实现先申请后审批的模式,杜绝违规用车用卡,确保责任落实到每个用户。本发明将车辆的申用、审批、维护、年检、记录查询等功能纳入管理,并将数据进行分析,及时向管理员推送通知信息,为公车使用效率提供保障。

    基于物联网技术的便携受控箱定位监控系统及方法

    公开(公告)号:CN111953756A

    公开(公告)日:2020-11-17

    申请号:CN202010762560.6

    申请日:2020-07-31

    Abstract: 本发明公开了一种基于物联网技术的便携受控箱定位监控系统及方法,系统包括受控终端,用于提供物品存储空间,并实时监测自身的状态信息,并将该信息传输至远程监控中心;手持监控器,用于控制受控终端工作并监控受控终端的状态信息。方法包括监测开机信号,启动初始化监控系统;实时监测受控终端的状态信息;对状态信息进行加密;通过远程通信模块将已加密数据发送至远程监控中心;在上述过程中,实时监测报警信号,在出现异常时及时报警,同时实时监测关机信号,在监测到该信号时,关闭监控系统。本发明具有多模定位、双模远程通信、数据加密、超距报警等多种功能,为用户对涉密或特殊价值物品的携带、递送提供了一种全新的监控技术手段。

    基于DSP的目标图像实时传输与跟踪装置

    公开(公告)号:CN203219421U

    公开(公告)日:2013-09-25

    申请号:CN201320167847.X

    申请日:2013-04-07

    Abstract: 本实用新型公开了一种基于DSP的目标图像实时传输与跟踪装置。本实用新型的装置包括图像处理单元、瞄具、随动系统、交换机、远程终端和综合管理PC。图像处理单元分别与交换机、随动装置和瞄具连接,交换机还与综合管理PC和远程终端连接,瞄具还与随动装置连接;瞄具中的摄像头把采集的可见光视频信号传递给图像处理单元,图像处理单元进行目标图像跟踪处理,提取出目标信息,把控制命令通过串口发送给随动装置,随动装置控制瞄具转动跟踪运动目标,并把处理后的视频图像传输到交换机,交换机进行远程传输,以太网上的远程终端和综合管理PC在解码视频信号后监控跟踪过程。本实用新型能够实现对运动目标的跟踪,并将跟踪过程传输到以太网。

    目标图像实时传输与跟踪系统

    公开(公告)号:CN203219420U

    公开(公告)日:2013-09-25

    申请号:CN201320167846.5

    申请日:2013-04-07

    Abstract: 本实用新型公开了一种目标图像实时传输与跟踪系统,包括目标图像处理模块、图像编码压缩模块、摄像机、随动云台和远端计算机;其中,摄像机一端与目标图像处理模块连接,另一端与随动云台连接,图像编码压缩模块一端与目标图像处理模块连接,另一端与远端计算机连接;摄像机把采集的运动目标视频信息传递给目标图像处理模块进行目标图像识别跟踪处理,同时发送命令给随动云台控制摄像机转动跟踪运动目标,并把目标跟踪图像经过图像编码压缩模块以高速方式传输给远端计算机显示;本实用新型能实现对运动目标的捕获跟踪,且能通过以太网实时传输跟踪视频信息。

Patent Agency Ranking