一种基于DQN和MCTS的箱区间多场桥动态调度方法

    公开(公告)号:CN112836974A

    公开(公告)日:2021-05-25

    申请号:CN202110163011.1

    申请日:2021-02-05

    Inventor: 沈磊 朱瑾

    Abstract: 本发明公开了一种基于DQN和MCTS的箱区间多场桥动态调度方法,采用DQN对多场桥动态调度模型进行训练,以得到具有在随机干扰下做出最优决策能力的深度Q网络,并利用深度Q网络引导MCTS进行堆场箱区间多场桥在线决策,给出场桥下一步的调度决策。本发明通过强化学习方法使多场桥动态调度模型自主探索堆场环境,生成大量学习样本,解决了场桥调度真实样本缺乏、难以获取的问题,同时将MCTS与DQN相结合求解箱区间多场桥动态调度问题,在线给出每一步最优调度决策,提高了决策方案在不确定干扰下的鲁棒性。

    一种基于烟花算法的带硬时间窗的车辆路径问题规划方法

    公开(公告)号:CN110657816A

    公开(公告)日:2020-01-07

    申请号:CN201910893357.X

    申请日:2019-09-20

    Abstract: 本发明涉及一种基于烟花算法的带硬时间窗的车辆路径问题规划方法,按照不同的规则分别构造两个初始种群,使烟花爆炸后的搜索空间更大,能在解空间内搜索到更多的可行解,初始阶段收敛速度快;其次将初始解的构造分为四个阶段,即对最小车辆数按照不同的规则分区,生成初始路径,对生成的路径进行约束检验,对不满足约束的客户点进行调整生成初始可行解。有效减少了冗余路径的产生。在双种群并行寻优过程中增加不同种群火花之间的交叉操作。在每一代烟花中随机选取一个种群中待爆炸的烟花与另一个种群的最优烟花执行爆炸操作,充分利用了每一代中适应度值较好的其他烟花,增加了种群多样性。

    一种能自动清洗污垢的饮水机

    公开(公告)号:CN107440516A

    公开(公告)日:2017-12-08

    申请号:CN201710662052.9

    申请日:2017-08-04

    Abstract: 本发明公开了一种能自动清洗污垢的饮水机,包括饮水机壳体、聪明座、内槽、热水管、冷水管、污水管、水箱、循环管、喷头、水泵、排水管和电磁阀;饮水机壳体顶部设有聪明座,聪明座下方设有内槽;内槽下方设有水箱,水箱顶部通过污水管与内槽相连通;水箱侧壁通过循环管与内槽相连接;水箱下方设有水泵,水箱侧壁底端设有排水管;热水管、冷水管、污水管、循环管、排水管上均设有电磁阀;饮水机壳体内设有控制器,控制器分别与每个电磁阀、水泵相电性连接;本发明能自动清洗污垢的饮水机通过喷头对内槽可进行自动清洗,且通过花洒对聪明座可进行清洗,能够使饮水机保持干净,让人们能够饮用到更健康的水,让人们使用饮水机更方便、放心和安全。

    一种基于烟花算法的带硬时间窗的车辆路径问题规划方法

    公开(公告)号:CN110657816B

    公开(公告)日:2021-06-15

    申请号:CN201910893357.X

    申请日:2019-09-20

    Abstract: 本发明涉及一种基于烟花算法的带硬时间窗的车辆路径问题规划方法,按照不同的规则分别构造两个初始种群,使烟花爆炸后的搜索空间更大,能在解空间内搜索到更多的可行解,初始阶段收敛速度快;其次将初始解的构造分为四个阶段,即对最小车辆数按照不同的规则分区,生成初始路径,对生成的路径进行约束检验,对不满足约束的客户点进行调整生成初始可行解。有效减少了冗余路径的产生。在双种群并行寻优过程中增加不同种群火花之间的交叉操作。在每一代烟花中随机选取一个种群中待爆炸的烟花与另一个种群的最优烟花执行爆炸操作,充分利用了每一代中适应度值较好的其他烟花,增加了种群多样性。

    一种能自动清洗污垢的饮水机

    公开(公告)号:CN107440516B

    公开(公告)日:2020-03-27

    申请号:CN201710662052.9

    申请日:2017-08-04

    Abstract: 本发明公开了一种能自动清洗污垢的饮水机,包括饮水机壳体、聪明座、内槽、热水管、冷水管、污水管、水箱、循环管、喷头、水泵、排水管和电磁阀;饮水机壳体顶部设有聪明座,聪明座下方设有内槽;内槽下方设有水箱,水箱顶部通过污水管与内槽相连通;水箱侧壁通过循环管与内槽相连接;水箱下方设有水泵,水箱侧壁底端设有排水管;热水管、冷水管、污水管、循环管、排水管上均设有电磁阀;饮水机壳体内设有控制器,控制器分别与每个电磁阀、水泵相电性连接;本发明能自动清洗污垢的饮水机通过喷头对内槽可进行自动清洗,且通过花洒对聪明座可进行清洗,能够使饮水机保持干净,让人们能够饮用到更健康的水,让人们使用饮水机更方便、放心和安全。

    一种用于自动化集装箱码头的集成调度方法

    公开(公告)号:CN109816242A

    公开(公告)日:2019-05-28

    申请号:CN201910063156.7

    申请日:2019-01-23

    Abstract: 本发明公开了一种用于自动化集装箱码头的集成调度方法,自动化集装箱码头作业区包括岸桥操作区、自动运输车运送区和集装箱堆存区,岸桥操作区设有多个岸桥QC,集装箱堆存区采用分体式自动储存系统SP-AS/RS进行集装箱堆存,包括:S1,判断是否为装载作业,如是则进入S2,否则进入S3;S2,选择最早到达目的地的自动运输车运行至分体式自动储存系统,分体式自动储存系统对集装箱进行提箱作业后,自动运输车将所述集装箱运行至岸桥QC,并将集装箱放置于岸桥QC的缓存区,最后等待下一任务;S3,选择最早到达目的地的自动运输车运行至岸桥QC,岸桥QC对集装箱进行提箱作业后,自动运输车将集装箱运行至分体式自动储存系统的缓存区,最后等待下一任务。

    一种考虑AGV碰撞规避的装卸设备调度方法

    公开(公告)号:CN107678433A

    公开(公告)日:2018-02-09

    申请号:CN201710984769.5

    申请日:2017-10-20

    Abstract: 本发明提出了一种考虑AGV碰撞规避的装卸设备调度方法。通过建立集装箱码头装卸设备的动态模型及两种类型的碰撞规避模型;将设备的离散事件动态视为一个混合流水车间调度问题,然后采用整体图形顺序法来调度该混合流水车间的所有集装箱任务;最后在考虑两种规避碰撞的情况下,根据引入分层控制结构,由状态监测控制器将产生的各操作时间窗发送给阶段控制器,阶段控制器将各操作时间窗分配给特定的设备,根据最小时间控制问题更新AGV的操作时间以实现AGV所有任务的无碰撞调度。这种同时考虑AGV碰撞规避及装卸设备的调度方法能满足大型自动化集装箱码头调度及管理问题的优化需求。

Patent Agency Ranking