基于视频监控与机器人的多信息融合行人检索方法与系统

    公开(公告)号:CN115116142B

    公开(公告)日:2025-04-25

    申请号:CN202210899131.2

    申请日:2022-07-28

    Applicant: 山东大学

    Abstract: 本公开涉及机器人视觉技术领域,提出了基于视频监控与机器人的多信息融合行人检索方法与系统,方法包括如下步骤:获取监控摄像头采集的图像数据,利用行人重识别模块进行行人重识别处理,得到行人重识别结果;获取移动机器人采集到的图像数据,对多个移动机器人采集的图像信息进行人脸识别处理;将监控摄像头与移动机器人采集的图像信息处理后进行融合,根据移动机器人与行人位置关系,利用行人所在区域的机器人采集的人脸信息对行人重识别模块的检测结果进行补充,得到目标行人检索结果。利用区域监控视觉传感器与机器人视觉传感器之间相互配合,分别从全局与局部对相关区域进行搜索,弥补单一视觉传感器所带来的问题,实现目标人物的搜索。

    基于语义和场景流几何信息的定位与建图方法及系统

    公开(公告)号:CN119169093A

    公开(公告)日:2024-12-20

    申请号:CN202411284781.1

    申请日:2024-09-13

    Applicant: 山东大学

    Abstract: 本发明提供了一种基于语义和场景流几何信息的定位与建图方法及系统,本发明使用环境的语义信息对动态目标进行辅助检测,将获取的语义信息与多视图几何紧密耦合,实现动态目标的快速准确识别;并结合基于深度和密度的场景流几何信息聚类,有效降低了常用的几何约束在动态环境中的局限性,在去除先验动态对象后,能够快速准确地计算出几何动态区域;在复杂动态场景下,建图耗时更少、具有更高的准确性和鲁棒性,而且可以创建直观的语义度量地图。本发明不仅显著提高了系统的定位精度,且具有优异的计算效率,适用于复杂环境,显著提高了复杂动态环境下的实时性、准确性和鲁棒性。

    一种基于深度强化学习的多机器人群集控制方法及系统

    公开(公告)号:CN118795893A

    公开(公告)日:2024-10-18

    申请号:CN202411168609.X

    申请日:2024-08-23

    Applicant: 山东大学

    Abstract: 本发明属于多机器人控制技术领域,尤其涉及一种基于深度强化学习的多机器人群集控制方法及系统,方法包括:将单步观测信息输入至决策模型中得到跟随者下一步的运动策略;在决策模型中,利用基于图神经网络的信息过滤器对机器人的交互进行精炼实现选择性通信;其包括第一图注意力模块、边滤波器以及第二图注意力模块;利用第一图注意力模块从不同的角度计算拓扑图中所有邻居节点的特征,得到多个更新后的拓扑图;利用边滤波器对更新后拓扑图中的邻居节点进行特征融合及边过滤,利用第二图注意力模块聚合过滤后的邻居节点的特征。本发明提出基于图神经网络的信息过滤器进行信息精炼,使机器人能够自适应地选择邻居进行交互,显著提高了通信效率。

    实时高精度鲁棒的紧耦合视觉惯性里程计方法及系统

    公开(公告)号:CN115326101B

    公开(公告)日:2024-07-26

    申请号:CN202211039383.4

    申请日:2022-08-29

    Applicant: 山东大学

    Abstract: 本公开涉及视觉惯性里程计技术领域,提出了一种实时高精度鲁棒的紧耦合视觉惯性里程计方法及系统,为了增强视觉和IMU数据的耦合程度,提高VIO系统的精度和鲁棒性,提出了一个紧耦合VIO框架,由基于滤波器的里程计模块和基于因子图的优化模块组成。为保证系统的实时性,使用多约束状态的卡尔曼滤波进行状态估计,使用基于滑动窗口的因子图优化方法进行局部地图优化,并使用词袋模型的回环检测方法进行全局优化。并在具有代表性的公共数据集和物理场景实验中评估了提出算法的性能。

    基于深度强化学习的智能体自适应决策生成方法及系统

    公开(公告)号:CN113487039B

    公开(公告)日:2023-08-22

    申请号:CN202110729857.7

    申请日:2021-06-29

    Applicant: 山东大学

    Abstract: 本公开提供了一种基于深度强化学习的智能体自适应决策生成方法及系统,基于深度强化学习SoftActor‑Cr it ic(SAC)算法对智能体自适应决策问题展开研究,并针对训练过程中出现的问题对SAC算法进行改进,提出了SAC+PER、SAC+ERE和SAC+PER+ERE算法,利用深度学习的强大感知能力和强化学习的高效决策能力解决智能体自适应决策问题,通过深度强化学习算法训练智能体,使其在与环境进行交互的过程中总结经验,从而形成自身对具体行为应用的认识;同时,以仿真环境下无人机反拦截任务为载体,验证了算法的有效性。

    群机器人在区域搜索中的随机搜索方法及系统

    公开(公告)号:CN110673826B

    公开(公告)日:2023-02-28

    申请号:CN201911023609.X

    申请日:2019-10-25

    Applicant: 山东大学

    Abstract: 本公开提出了群机器人在区域搜索中的随机搜索方法及系统,包括:建立机器人随机行走模型,利用所述模型控制机器人的随机运动;构造随机数生成器使其能够生成满足给定分布的步长并确保生成的步长大小在指定范围内;机器人使用随机行走方法执行区域搜索任务时,根据搜索任务的特点选定合适的步长,实现对机器人运动距离的有效控制;使用均方位移作为性能指标来衡量机器人的搜索效率。

    群机器人觅食中基于动态响应阈值的自组织任务分配方法

    公开(公告)号:CN109615057B

    公开(公告)日:2023-02-28

    申请号:CN201811444668.X

    申请日:2018-11-29

    Applicant: 山东大学

    Abstract: 本发明公开了群机器人觅食中基于动态响应阈值的自组织任务分配方法,包括:在觅食任务开始时,所有机器人都聚集在巢穴中处于等待状态,当等待时间超过给定时间后,使用动态响应阈值模型计算觅食概率,基于觅食概率,机器人决定是否开始觅食,即从等待状态切换到搜索状态;其中,动态响应阈值模型中,使用交通流密度,即一段时间内机器人的平均避障次数及觅食机器人密度,作为动态变化的阈值来衡量环境中机器人运动的交通状况,群机器人对环境的变化做出适当的响应,产生自组织的任务分配。构造了基于交通流密度的动态响应阈值模型使群机器人系统能够产生自组织的任务分配,从而减少了机器人之间的物理交互,提高了群机器人的觅食效率。

    基于特征融合和改进粒子群算法的模拟电路故障诊断方法

    公开(公告)号:CN115186564A

    公开(公告)日:2022-10-14

    申请号:CN202210515698.5

    申请日:2022-05-12

    Applicant: 山东大学

    Abstract: 本发明提供了一种基于特征融合和改进粒子群算法的模拟电路故障诊断方法,获取模拟电路的故障一维时域数据,将一维时域数据转化为二维时频图像数据;根据一维时域数据和一维卷积神经网络,得到第一特征;根据二维时频图像数据和深度残差网络,得到第二特征;将第一特征与第二特征拼接后,得到最后的故障特征;根据故障特征与预训练的支持向量机,得到故障类型;其中,采用改进粒子群算法优化支持向量机的惩罚参数和核参数,改进粒子群算法中,根据平衡因子、粒子与种群适应度最优粒子之间的距离和适应度值计算每个粒子的综合分数,根据粒子的分数从高到低排序,将综合分数最高的粒子选为综合最优粒子;本发明极大的提高了模拟电路故障诊断精度。

Patent Agency Ranking