数据多播方法、装置、系统、电子设备及存储介质

    公开(公告)号:CN119520184A

    公开(公告)日:2025-02-25

    申请号:CN202411783668.8

    申请日:2024-12-05

    Inventor: 兰可嘉 程永波

    Abstract: 本发明实施例公开一种数据多播方法、装置、系统、电子设备及存储介质,涉及通信技术领域,其中所述方法包括:数据源节点获取多播数据的多播地址信息;数据源节点生成一份携带有多播数据和多播地址信息的数据存储报文;数据源节点将报文发送给交换节点;交换节点根据报文中的多播地址信息,将报文多播至多播组各成员节点;多播组各成员节点根据报文中的多播地址信息,将报文中的多播数据保存至各自的节点存储地址所指向的内存位置。本发明实施例可适用于大规模模型训练中使用多个CPU/GPU进行模型并行、数据并行或流水线并行处理时的数据多播场景,以解决现有技术中内存带宽和网络带宽负担过重的问题。

    任务处理装置及方法、电子设备和计算机可读存储介质

    公开(公告)号:CN119473938A

    公开(公告)日:2025-02-18

    申请号:CN202411581646.3

    申请日:2024-11-07

    Abstract: 一种任务处理装置及方法、电子设备和计算机可读存储介质。该任务处理装置包括任务信息单元、映射关系单元和处理单元。任务信息单元被配置为存储待处理的目标任务;映射关系单元被配置为存储对应于目标任务的从虚拟地址到物理地址的对象映射关系和预取映射关系;处理单元被配置为根据目标任务包括的目标虚拟地址,在映射关系单元设置或查询对象映射关系,以获取对应于目标任务的目标物理地址,并且根据目标任务,预先设置预取映射关系。该任务处理装置可以以较低的硬件资源开销,实现高效的虚拟地址和物理地址的转换,降低请求阻塞,缩短地址转换的执行周期。

    直接内存访问控制器、处理方法、计算装置和存储介质

    公开(公告)号:CN119597687A

    公开(公告)日:2025-03-11

    申请号:CN202411627516.9

    申请日:2024-11-14

    Abstract: 本公开的实施例涉及一种直接内存访问控制器及直接内存访问任务的处理方法、计算装置及存储介质。直接内存访问控制器包括执行单元,该执行单元被配置为:从第一存储空间中读取待处理直接内存访问任务,并将读取的待处理直接内存访问任务存储至第二存储空间以作为待执行直接内存访问任务,以及执行第二存储空间存储的待执行直接内存访问任务。该方法通过设置两级存储空间来存储直接内存访问任务,可以使得直接内存访问控制器缓存多个直接内存访问任务并执行缓存的任务,无需在内存中存储直接内存访问任务并维护读写指针,任务的启动无需进行读写指针的频繁交互,任务启动更快捷且资源消耗更小。

Patent Agency Ranking