发明公开
- 专利标题: 数据流策略生成方法、装置、电子设备和存储介质
-
申请号: CN202310277121.X申请日: 2023-03-16
-
公开(公告)号: CN116431205A公开(公告)日: 2023-07-14
- 发明人: 李浩然 , 薛菲 , 仲睿光 , 高源 , 方元炜 , 刘培业
- 申请人: 阿里巴巴(中国)有限公司
- 申请人地址: 浙江省杭州市余杭区五常街道文一西路969号3幢5层554室
- 专利权人: 阿里巴巴(中国)有限公司
- 当前专利权人: 阿里巴巴(中国)有限公司
- 当前专利权人地址: 浙江省杭州市余杭区五常街道文一西路969号3幢5层554室
- 代理机构: 北京合智同创知识产权代理有限公司
- 代理商 李杰; 闫喜鹏
- 主分类号: G06F8/75
- IPC分类号: G06F8/75
摘要:
本申请实施例提供了一种数据流策略生成方法、装置、电子设备和存储介质,该数据流策略生成方法包括:获取数据处理任务对应的计算图;根据计算图和执行成本生成阶段间数据流策略,其中,阶段间数据流策略包括将计算图包括的算子划分为多个流水线阶段的策略,流水线阶段包括至少一个算子;根据阶段间数据流策略,生成多个流水线阶段对应的多个阶段内数据流策略;根据多个阶段内数据流策略更新执行成本,以优化阶段间数据流策略,获得用于执行数据处理任务的目标阶段间数据流策略和相对应的多个目标阶段内数据流策略。本方案提供的数据流策略生成方案能够适用于不同的数据处理任务和硬件,具有较强的适用性。