-
公开(公告)号:CN118860657A
公开(公告)日:2024-10-29
申请号:CN202411039357.0
申请日:2024-07-31
Applicant: 中国移动通信集团浙江有限公司 , 中国移动通信集团有限公司 , 中国移动(浙江)创新研究院有限公司 , 浙江移动信息系统集成有限公司
IPC: G06F9/50 , G06F9/48 , G06F18/2321
Abstract: 本申请涉及计算机领域,提供一种任务分解方法、装置、设备、介质及产品。其中方法包括:获取待分解任务的各个任务元;基于各个任务元的自身属性和各个任务元之间的相关性确定各个任务元之间的初始截断距离;基于最小化基尼指数的自适应截断距离选择机制对初始截断距离进行优化,得到优化结果;基于优化结果将待分解任务拆解为各个子任务。本申请通过将各个任务元的自身属性和各个任务元之间的相关性转变成任务元间的距离关系,通过最小化基尼指数将密度峰值聚类算法进行改进,可以将待分解任务拆分为合适粒度的子任务,提高了任务分解效率和分解准确度,提高了任务处理效率。
-
公开(公告)号:CN118819395A
公开(公告)日:2024-10-22
申请号:CN202410220809.9
申请日:2024-02-28
Applicant: 中移(杭州)信息技术有限公司 , 中国移动通信集团有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种数据处理方法、装置、电子设备、介质及程序产品,方法包括:获取数据访问地址;从预获取的数据访问记录中查找数据访问地址对应的节点信息,得到查找结果,数据访问记录用于记录存储在第一硬盘中的数据的节点信息;若查找结果包括目标节点信息,则从第一硬盘中获取目标节点信息对应的目标数据,目标节点信息包括目标数据的描述信息;若查找结果不包括目标节点信息,则从第二硬盘中获取目标数据,存储在第一硬盘上的数据的访问频率高于存储在第二硬盘上的数据的访问频率。上述中,可以通过查询数据访问记录来确定目标数据是存储在哪个硬盘,从而直接确定目标数据的存储位置,避免多次访问硬盘,提高数据获取效率。
-
公开(公告)号:CN118798293A
公开(公告)日:2024-10-18
申请号:CN202311394640.0
申请日:2023-10-25
Applicant: 中国移动通信集团浙江有限公司 , 中国移动(浙江)创新研究院有限公司 , 中国移动通信集团有限公司
IPC: G06N3/082 , G06N3/0455
Abstract: 本发明提供一种基于多任务辅助的神经网络通道剪枝方法及装置,方法包括:确定骨干网络的任务内容,所述任务内容包括主任务和辅助任务;构造和初始化所述骨干网络的编码向量,所述编码向量至少包括:当前层网络的第一编码向量和上一层网络的第二编码向量;对所述编码向量增加L1系数正则化约束,得到约束结果,将所述编码向量作为所述当前层网络的句柄,将所述句柄结合所述约束结果对所述当前层网络进行所述编码向量对应通道的剪枝;将所述第一编码向量和第二编码向量输入至已构建的权重生成网络中进行训练和网络结构修剪,得到训练完成的剪枝网络。本发明能够提升主任务精度和进一步增强网络的泛化能力。
-
公开(公告)号:CN118798283A
公开(公告)日:2024-10-18
申请号:CN202311782784.3
申请日:2023-12-22
Applicant: 中国移动通信集团浙江有限公司 , 中国移动(浙江)创新研究院有限公司 , 中国移动通信集团有限公司
Abstract: 本申请公开了一种模型训练加速方法和装置,该模型训练加速方法包括:在模型训练过程中,对梯度变化率低于冻结阈值的网络层进行冻结,所述冻结用于使得所述网络层停止反向传播;根据衰减系数对所述冻结阈值进行衰减处理,得到衰减冻结阈值;利用未冻结的网络层进行模型训练,对梯度变化率低于所述衰减冻结阈值的网络层进行冻结,直至所述模型训练达到预设精度或预设次数为止。本申请实施例在模型训练过程中逐渐冻结部分网络层,以停止反向传播,有效减少了显存占用提升运算效率,提升训练速度,同时对冻结阈值进行衰减处理,避免提前将未训练收敛的网络层冻结的情况发生。
-
-
-