-
公开(公告)号:CN113569466A
公开(公告)日:2021-10-29
申请号:CN202110772706.X
申请日:2021-07-08
申请人: 广东利通科技投资有限公司 , 复旦大学
IPC分类号: G06F30/27 , G06N3/04 , G06N3/08 , G06F111/08
摘要: 本发明属于深度强化学习技术领域,具体为一种基于值函数的参数化深度强化学习算法。本发明是将强化学习中的状态动作值函数(Q值)分解为状态值函数(V值)和优势函数(A值)之和,V值用于估计各离散动作下的期望累计奖励,A值用于估计各连续动作带来的累计奖励偏差;通过构建单个神经网络,同时输出最优离散动作和连续动作选择。本发明算法同时解决了Q值过估计问题,在动作决策时离散动作V值仅取决于其对应的连续动作,在神经网络训练过程中连续动作更新仅与其对应的离散动作有关。仿真实验结果表明,相比于其余参数化强化学习算法,本发明具有更快的收敛速度和更好的收敛效果。
-
公开(公告)号:CN115052187B
公开(公告)日:2024-05-03
申请号:CN202210450602.1
申请日:2022-04-26
申请人: 复旦大学 , 广东利通科技投资有限公司
IPC分类号: H04N21/44 , H04N21/462 , H04N21/437 , H04N21/234 , H04N21/2187 , H04N21/643 , G06T3/4053 , G06N3/0464 , G06N3/08
摘要: 本发明属于直播流媒体技术领域,具体为一种基于在线训练的超分辨率直播系统,适用于配备GPU计算能力的PC、移动终端和智能汽车的视频直播应用。本发明系统包括:在推流端上行带宽不足的情况下,直播者在推流端以RTMP协议向服务器上传低分辨率视频流,同时利用原始高清视频自适应训练空域超分辨率网络F‑EDSR并上传到远端服务器;服务器端接收低分辨率视频流和F‑EDSR网络,并用空域超分辨网络F‑EDSR和时域超分辨率网络TCSR级联实时处理视频流,合成高清超分辨率视频。结果表明,本发明可以在推流端上传带宽不足的情况下,实时对视频流做超分辨率重构,用较少的计算资源获得高质量的视频画面。
-
公开(公告)号:CN113568675B
公开(公告)日:2024-04-12
申请号:CN202110772708.9
申请日:2021-07-08
申请人: 广东利通科技投资有限公司 , 复旦大学
IPC分类号: G06F9/445 , G06F9/50 , G06F30/15 , G06F30/27 , G06N3/042 , G06N3/092 , G06F111/04 , G06F111/06
摘要: 本发明属于车联网边缘计算技术领域,具体为一种基于分层强化学习的车联网边缘计算任务卸载方法。本发明首先将车联网边缘计算网络中的任务卸载问题建模为以最小化时延‑能耗‑费用联合损失函数为目标的优化问题,其中优化参数为任务执行顺序、计算决策、本地资源分配和传输功率控制;然后将具有任务关联性的应用以有向无环图的形式表示,并利用图神经网络挖掘其中的隐含特征,同时利用分层强化学习算法处理离散连续混合动作空间。以真实环境中采取的汽车速度作为数据集进行仿真实验,结果表明,相比于启发式算法,本发明方法在多种环境参数下均能自适应地调节任务卸载和资源分配策略,进而更有效地降低系统损失函数。
-
公开(公告)号:CN113568675A
公开(公告)日:2021-10-29
申请号:CN202110772708.9
申请日:2021-07-08
申请人: 广东利通科技投资有限公司 , 复旦大学
IPC分类号: G06F9/445 , G06F9/50 , G06F30/15 , G06F30/27 , G06N3/04 , G06N3/08 , G06F111/04 , G06F111/06
摘要: 本发明属于车联网边缘计算技术领域,具体为一种基于分层强化学习的车联网边缘计算任务卸载方法。本发明首先将车联网边缘计算网络中的任务卸载问题建模为以最小化时延‑能耗‑费用联合损失函数为目标的优化问题,其中优化参数为任务执行顺序、计算决策、本地资源分配和传输功率控制;然后将具有任务关联性的应用以有向无环图的形式表示,并利用图神经网络挖掘其中的隐含特征,同时利用分层强化学习算法处理离散连续混合动作空间。以真实环境中采取的汽车速度作为数据集进行仿真实验,结果表明,相比于启发式算法,本发明方法在多种环境参数下均能自适应地调节任务卸载和资源分配策略,进而更有效地降低系统损失函数。
-
公开(公告)号:CN116347473A
公开(公告)日:2023-06-27
申请号:CN202310199383.9
申请日:2023-03-03
申请人: 广东利通科技投资有限公司 , 复旦大学
摘要: 本发明属于移动边缘计算微服务技术领域,具体为在5G及车联网场景下基于微小区架构的边缘计算微服务部署和任务调度方法。本发明方法包括:首先对5G场景下基于微小区的边缘计算网络结构进行描述;在此基础上对微服务部署和任务调度问题进行系统性建模,优化目标为最小化所有用户的延迟,其主要表现为处理数据上传延迟;然后将该问题通过分解并完全求解子问题将原始的问题转化为线性整数规划问题;采用L2Box‑ADMM算法对线性整数规划问题进行求解。测试结果表明,相比于其他的微服务部署和任务调度算法,本发明算法可以找出满足资源约束条件的使得总延迟更小的微服务部署和任务调度策略,能将与最优解的差距降低35%。
-
公开(公告)号:CN115914349A
公开(公告)日:2023-04-04
申请号:CN202211314292.7
申请日:2022-10-25
申请人: 广东利通科技投资有限公司 , 复旦大学
IPC分类号: H04L67/51 , H04L41/5054 , H04L41/14 , H04L41/142 , H04L41/0894
摘要: 本发明属于移动边缘计算微服务放置技术领域,具体为一种基于图最短路径变体的移动边缘计算微服务放置算法。本发明首先对移动边缘计算环境下微服务放置问题进行系统性的建模,优化目标为最小化所有用户的总时延,包括启动延迟和通信延迟,同时考虑对资源的约束。随后将该问题转化为求图最短路径问题的变体,通过引入偏序关系和最优偏序对集合的概念,创新性地提出同时基于延迟和资源消耗量的求解方法,并证明其算法最优性。测试结果表明,相比于其他微服务放置算法,本发明算法可以找出满足资源约束条件的使得延迟最小的微服务放置策略。
-
公开(公告)号:CN115226204A
公开(公告)日:2022-10-21
申请号:CN202210732043.3
申请日:2022-06-26
申请人: 广东利通科技投资有限公司 , 复旦大学
摘要: 本发明属于无线定位技术领域,具体为一种基于单射频链路的远距离无线电车辆定位方法。本发明方法包括以下步骤:采用基于AOA原理的异步天线阵列定位系统接收LoRa信号,对目标进行CFO估计,以及对车辆进行粗略定位;基于AOA测量的角度结果对接收到的LoRa信号进行修正,并且实时解码出准确的车辆加速度以及偏航角信息;基于卡尔曼滤波原理,对AOA计算出的定位结果与IMU测量的加速度信息进行数据融合,从而完成精确的车辆定位。
-
公开(公告)号:CN115914349B
公开(公告)日:2024-04-19
申请号:CN202211314292.7
申请日:2022-10-25
申请人: 广东利通科技投资有限公司 , 复旦大学
IPC分类号: H04L67/51 , H04L41/5054 , H04L41/14 , H04L41/142 , H04L41/0894
摘要: 本发明属于移动边缘计算微服务放置技术领域,具体为一种基于图最短路径变体的移动边缘计算微服务放置方法。本发明首先对移动边缘计算环境下微服务放置问题进行系统性的建模,优化目标为最小化所有用户的总时延,包括启动延迟和通信延迟,同时考虑对资源的约束。随后将该问题转化为求图最短路径问题的变体,通过引入偏序关系和最优偏序对集合的概念,创新性地提出同时基于延迟和资源消耗量的求解方法,并证明其方法最优性。测试结果表明,相比于其他微服务放置方法,本发明方法可以找出满足资源约束条件的使得延迟最小的微服务放置策略。
-
公开(公告)号:CN115052187A
公开(公告)日:2022-09-13
申请号:CN202210450602.1
申请日:2022-04-26
申请人: 复旦大学 , 广东利通科技投资有限公司
IPC分类号: H04N21/44 , H04N21/462 , H04N21/437 , H04N21/234 , H04N21/2187 , H04N21/643 , G06T3/40 , G06N3/04 , G06N3/08
摘要: 本发明属于直播流媒体技术领域,具体为一种基于在线训练的超分辨率直播系统,适用于配备GPU计算能力的PC、移动终端和智能汽车的视频直播应用。本发明系统包括:在推流端上行带宽不足的情况下,直播者在推流端以RTMP协议向服务器上传低分辨率视频流,同时利用原始高清视频自适应训练空域超分辨率网络F‑EDSR并上传到远端服务器;服务器端接收低分辨率视频流和F‑EDSR网络,并用空域超分辨网络F‑EDSR和时域超分辨率网络TCSR级联实时处理视频流,合成高清超分辨率视频。结果表明,本发明可以在推流端上传带宽不足的情况下,实时对视频流做超分辨率重构,用较少的计算资源获得高质量的视频画面。
-
公开(公告)号:CN117915328A
公开(公告)日:2024-04-19
申请号:CN202410117892.7
申请日:2024-01-29
申请人: 复旦大学
IPC分类号: H04W12/069 , H04W12/0431 , H04L9/40
摘要: 本发明属于未来网络和接入认证技术领域,具体为一种适应网络孪生场景下的接入认证方法。本发明方法包括:终端设备注册阶段,终端向认证中心发起注册请求,获取上网身份标识;该身份与网络孪生建立映射关系,以避免移动性带来的设备无法识别问题;接入阶段,终端设备向接入点发起接入请求,并请求对应的网络孪生的位置信息以及访问令牌信息;接入点验证设备合法信息,通过验证后协商出安全的会话通道并响应终端设备对网络孪生信息的请求;认证阶段,终端设备通过访问令牌以及随机数完成与网络孪生的双向身份认证,并协商出后续通信的会话密钥;本发明用于终端设备在基于网络孪生的云原生网络架构下的接入认证,可提高用户、终端、网络的安全性。
-
-
-
-
-
-
-
-
-