-
公开(公告)号:CN115687252A
公开(公告)日:2023-02-03
申请号:CN202111266495.9
申请日:2021-10-28
Applicant: 华为云计算技术有限公司
IPC: G06F16/13 , G06F16/182
Abstract: 本申请实施例公开了一种计算方法、装置、设备及存储介质,所述方法包括:接收并存储至少一个计算节点发送的分片文件以及对应的索引文件,其中,所述分片文件是所述至少一个计算节点执行映射map任务生成的,所述索引文件包括至少一个归约reduce任务的输入数据在所述分片文件中的位置信息;接收目标计算节点发送的输入数据获取请求,所述输入数据获取请求用于获取reduce任务的输入数据;根据所述输入数据获取请求和索引文件,将所述reduce任务对应的输入数据发送至所述目标计算节点。采用本申请,可以降低计算节点和存储设备之间读写数据占用的网络带宽进而可以提升计算效率。