一种混合存储架构HPC系统中应用I/O请求的动态调度方法

    公开(公告)号:CN110209350A

    公开(公告)日:2019-09-06

    申请号:CN201910386909.8

    申请日:2019-05-10

    Abstract: 本发明公开了一种混合存储架构HPC系统中应用I/O请求的动态调度方法,属于高性能计算技术领域。本发明使用随机程度表示应用的访问模式特征,动态调度I/O请求,选择随机程度较大的应用写入对随机程度不敏感的SSD,随机程度较小的应用写入对随机程度敏感的HDD,HDD尽可能处理连续模式的请求,SSD尽可能处理随机模式的请求,从而减轻I/O干扰问题。根据发现的I/O资源竞争时带宽分布相对稳定的现象,提出对于带宽分配的计算方法,可用于预测存储设备的动态负载。结合应用的随机程度和在存储设备中可能获得的带宽两个参数,利用应用访问模式特性和不同存储设备负载特性,合理调度I/O请求,保障应用在运行时间前完成运行,同时提高系统性能,从而保障应用服务质量。

    一种基于动态预取策略的Docker容器COW机制优化方法及系统

    公开(公告)号:CN110058923A

    公开(公告)日:2019-07-26

    申请号:CN201910252490.7

    申请日:2019-03-29

    Abstract: 本发明公开了一种基于动态预取策略的Docker容器COW机制优化方法及系统,属于容器轻量级虚拟化领域。包括:采集各Docker容器生命周期内被执行COPY UP操作的所有镜像文件的元数据信息;根据采集到的元数据信息,动态预测新Docker容器运行期间将被执行COPY UP操作的镜像文件;在新Docker容器启动后,对预测得到的将被执行COPY UP操作的镜像文件执行COPY UP操作。本发明基于同一镜像的容器内部操作大概率相同的特性,对Docker容器内部被执行COPY UP操作的镜像文件元数据信息进行记录,形成Docker镜像对应的历史信息。利用该历史信息,预测新容器运行期间最有可能被执行COPY UP操作的镜像文件,在新容器运行初期,对这些镜像文件执行预先的COPY UP操作,消除了Docker容器因COW机制产生额外开销。

    一种基于动态预取策略的Docker容器COW机制优化方法及系统

    公开(公告)号:CN110058923B

    公开(公告)日:2021-03-26

    申请号:CN201910252490.7

    申请日:2019-03-29

    Abstract: 本发明公开了一种基于动态预取策略的Docker容器COW机制优化方法及系统,属于容器轻量级虚拟化领域。包括:采集各Docker容器生命周期内被执行COPY UP操作的所有镜像文件的元数据信息;根据采集到的元数据信息,动态预测新Docker容器运行期间将被执行COPY UP操作的镜像文件;在新Docker容器启动后,对预测得到的将被执行COPY UP操作的镜像文件执行COPY UP操作。本发明基于同一镜像的容器内部操作大概率相同的特性,对Docker容器内部被执行COPY UP操作的镜像文件元数据信息进行记录,形成Docker镜像对应的历史信息。利用该历史信息,预测新容器运行期间最有可能被执行COPY UP操作的镜像文件,在新容器运行初期,对这些镜像文件执行预先的COPY UP操作,消除了Docker容器因COW机制产生额外开销。

    一种混合存储架构HPC系统中应用I/O请求的动态调度方法

    公开(公告)号:CN110209350B

    公开(公告)日:2020-07-10

    申请号:CN201910386909.8

    申请日:2019-05-10

    Abstract: 本发明公开了一种混合存储架构HPC系统中应用I/O请求的动态调度方法,属于高性能计算技术领域。本发明使用随机程度表示应用的访问模式特征,动态调度I/O请求,选择随机程度较大的应用写入对随机程度不敏感的SSD,随机程度较小的应用写入对随机程度敏感的HDD,HDD尽可能处理连续模式的请求,SSD尽可能处理随机模式的请求,从而减轻I/O干扰问题。根据发现的I/O资源竞争时带宽分布相对稳定的现象,提出对于带宽分配的计算方法,可用于预测存储设备的动态负载。结合应用的随机程度和在存储设备中可能获得的带宽两个参数,利用应用访问模式特性和不同存储设备负载特性,合理调度I/O请求,保障应用在运行时间前完成运行,同时提高系统性能,从而保障应用服务质量。

Patent Agency Ranking