文件存储方法、相关装置及文件存储系统

    公开(公告)号:CN112506875B

    公开(公告)日:2023-01-17

    申请号:CN202011479173.8

    申请日:2020-12-15

    Abstract: 本申请提出一种文件存储方法、装置、设备、存储介质及文件存储系统,该方法包括:以文件对应的业务类型作为第一权重影响参数,以文件的被访问频率和/或文件存储时长作为第二权重影响参数,利用第一和第二权重影响参数,更新在第一数据存储区存储的文件的权重;基于所述第一数据存储区存储的文件的更新后的权重,将所述第一数据存储区中存储的、符合预设的迁移存储条件的文件存储至第二数据存储区;其中,所述第二数据存储区的读写性能与所述第一数据存储区的读写性能不同;所述预设的迁移存储条件与文件的权重相关。上述方法使得对存储器中的文件存储管理更科学、更全面,利于提升文件存储秩序和文件读写性能。

    数据传输方法及相关装置、设备、系统和存储介质

    公开(公告)号:CN113992658B

    公开(公告)日:2023-09-26

    申请号:CN202111265967.9

    申请日:2021-10-28

    Abstract: 本申请公开了一种数据传输方法及相关装置、设备、系统和存储介质,其中,数据传输方法包括:获取与目标文件相关的集群寻址请求;且集群寻址请求是网关设备对用户设备的第一请求消息进行预处理得到的,且第一请求消息包括目标文件的文件名称和文件操作;响应于集群寻址请求,基于文件操作查询元数据中心,得到目标集群;且文件操作在目标集群执行;基于文件名称和目标集群的集群地址,生成与目标集群的集群类型匹配的访问协议消息,并发送访问协议消息至网关设备;且网关设备基于访问协议消息生成第二请求消息,并发送第二请求消息至目标集群,以完成传输目标文件。上述方案,能够实现用户无感知访问,同时提升数据传输效率并降低成本。

    数据备份方法、装置、设备、系统及存储介质

    公开(公告)号:CN114356650A

    公开(公告)日:2022-04-15

    申请号:CN202111397882.6

    申请日:2021-11-19

    Abstract: 本申请公开了一种数据备份方法、装置、设备、系统及存储介质,其中,数据设备方法包括:响应于备份指令,对第一集群进行数据检测,得到数据检测结果;其中,数据检测结果包括第一集群中是否存入目标数据;基于数据检测结果,在多种预设备份机制中选择得到目标备份机制;且多种预设备份机制至少包括快照机制、日志机制;基于目标备份机制,对目标数据执行备份操作,以将目标数据备份至第二集群。通过上述方式,本申请能够尽可能降低数据丢失对用户侧业务影响。

    数据传输方法及相关装置、设备、系统和存储介质

    公开(公告)号:CN113992658A

    公开(公告)日:2022-01-28

    申请号:CN202111265967.9

    申请日:2021-10-28

    Abstract: 本申请公开了一种数据传输方法及相关装置、设备、系统和存储介质,其中,数据传输方法包括:获取与目标文件相关的集群寻址请求;且集群寻址请求是网关设备对用户设备的第一请求消息进行预处理得到的,且第一请求消息包括目标文件的文件名称和文件操作;响应于集群寻址请求,基于文件操作查询元数据中心,得到目标集群;且文件操作在目标集群执行;基于文件名称和目标集群的集群地址,生成与目标集群的集群类型匹配的访问协议消息,并发送访问协议消息至网关设备;且网关设备基于访问协议消息生成第二请求消息,并发送第二请求消息至目标集群,以完成传输目标文件。上述方案,能够实现用户无感知访问,同时提升数据传输效率并降低成本。

    文件存储方法、相关装置及文件存储系统

    公开(公告)号:CN112506875A

    公开(公告)日:2021-03-16

    申请号:CN202011479173.8

    申请日:2020-12-15

    Abstract: 本申请提出一种文件存储方法、装置、设备、存储介质及文件存储系统,该方法包括:以文件对应的业务类型作为第一权重影响参数,以文件的被访问频率和/或文件存储时长作为第二权重影响参数,利用第一和第二权重影响参数,更新在第一数据存储区存储的文件的权重;基于所述第一数据存储区存储的文件的更新后的权重,将所述第一数据存储区中存储的、符合预设的迁移存储条件的文件存储至第二数据存储区;其中,所述第二数据存储区的读写性能与所述第一数据存储区的读写性能不同;所述预设的迁移存储条件与文件的权重相关。上述方法使得对存储器中的文件存储管理更科学、更全面,利于提升文件存储秩序和文件读写性能。

    数据备份方法、装置、设备、系统及存储介质

    公开(公告)号:CN114356650B

    公开(公告)日:2025-05-02

    申请号:CN202111397882.6

    申请日:2021-11-19

    Abstract: 本申请公开了一种数据备份方法、装置、设备、系统及存储介质,其中,数据设备方法包括:响应于备份指令,对第一集群进行数据检测,得到数据检测结果;其中,数据检测结果包括第一集群中是否存入目标数据;基于数据检测结果,在多种预设备份机制中选择得到目标备份机制;且多种预设备份机制至少包括快照机制、日志机制;基于目标备份机制,对目标数据执行备份操作,以将目标数据备份至第二集群。通过上述方式,本申请能够尽可能降低数据丢失对用户侧业务影响。

    用于分布式存储系统的存储方法、电子设备及存储介质

    公开(公告)号:CN112162707A

    公开(公告)日:2021-01-01

    申请号:CN202011101715.8

    申请日:2020-10-15

    Abstract: 本发明实施例提供一种用于分布式存储系统的存储方法、电子设备及存储介质,分布式存储系统包括元数据中心和多个存储集群,该方法包括:获取待存储对象的存储请求,根据第一URL从元数据中心查找待存储对象存放的RealBucket,利用RealBucket所属的第一存储集群的集群类型重新组织所述第一URL以形成第二URL,并基于第二URL将待存储对象存放到第一存储集群。根据第一URL从元数据中心查找待存储对象存放的RealBucket,不仅可以快速确定出待存储对象存放的RealBucket,而且由于存储过程中并不需要引入待存储对象的数据索引,可以大大节约元数据的存储空间,降低存储规模以及复杂度。

    分布式存储系统、方法、装置、电子设备和存储介质

    公开(公告)号:CN112035428A

    公开(公告)日:2020-12-04

    申请号:CN202010954902.4

    申请日:2020-09-11

    Abstract: 本发明实施例提供一种分布式存储系统、方法、装置、电子设备和存储介质,该系统包括:热缓存资源池,用于缓存文件,并将所述文件置于合并队列;冷存储资源池,用于存储合并数据,所述合并数据是所述合并队列中文件数量达到预设阈值后合并而成;元数据存储资源池,用于存储所述文件的元数据的索引信息、合并后的元数据以及自定义映射信息中的至少一种。本发明实施例提供的系统、方法、装置、电子设备和存储介质,解决了写入性能瓶颈和文件直接落盘的膨胀率问题,并且从合并规模层面上减少了合并操作带来的操作开销,同时保证了合并数据的大小可控,有助于进一步消除落盘膨胀的问题。

    分布式存储系统、虚拟机创建和数据卷扩容方法

    公开(公告)号:CN112162702B

    公开(公告)日:2024-05-31

    申请号:CN202011026725.X

    申请日:2020-09-25

    Abstract: 本发明实施例提供一种分布式存储系统、虚拟机创建和数据卷扩容方法,其中分布式存储系统包括:镜像服务组件,用于新增可用存储集群;块存储组件,用于基于新增的可用存储集群进行扩容。本发明实施例提供的分布式存储系统、虚拟机创建和数据卷扩容方法,分布式存储系统可以在可用存储集群层面上进行扩容,相较于增加pool的扩容方式,扩容操作更加简单便捷,且不涉及对任何正在提供服务的可用存储集群的侵入操作,维护难度低,有助于分布式存储系统应对更加丰富复杂的IO性能场景。

Patent Agency Ranking