-
公开(公告)号:CN116820353A
公开(公告)日:2023-09-29
申请号:CN202311085803.7
申请日:2023-08-28
申请人: 苏州浪潮智能科技有限公司
IPC分类号: G06F3/06
摘要: 本发明公开了一种分布式存储系统的数据处理方法、系统、设备以及存储介质,涉及存储领域,包括步骤:为存储对象申请若干个缓存块,存储对象包括多个子区域,其中每一个缓存块对应一个子区域,并建立缓存块与子区域的第一映射关系;响应于接收到快照请求,生成快照对象并建立快照对象与缓存块的第二映射关系;响应于触发数据回收,以子区域为粒度进行回收并将回收的多个子区域重新聚合成新的存储对象;确定每一个回收的子区域对应的缓存块并基于新的存储对象修改每一个确定的缓存块对应的第一映射关系,进而使快照对象与新的存储对象关联。本发明提出的方案解决了快照数量多的时候数据回收性能低下的问题,降低了数据回收对前端业务的影响。
-
公开(公告)号:CN112463043B
公开(公告)日:2023-01-10
申请号:CN202011311240.5
申请日:2020-11-20
申请人: 苏州浪潮智能科技有限公司
IPC分类号: G06F3/06
摘要: 本申请提供一种存储集群的扩容方法,包括:接收扩容指令,并确定所述扩容指令对应的新扩容节点;遍历所有放置组,确定各所述放置组对应OSD的引用计数;每个OSD的引用计数与其承载的放置组数量相同;将每个放置组中引用计数最大的OSD置为待确定OSD;调用数据分布接口从所述新扩容节点中选择最优OSD替换所述待确定OSD。本申请使得每个放置组中引用技术最大的OSD只会被替换为新扩容节点中的OSD,杜绝了旧节点内部之间的数据迁移,从而提高扩容重构效率,降低系统进行扩容时的资源使用率,提高存储系统性能。本申请还提供一种存储集群的扩容系统、计算机可读存储介质和存储设备,具有上述有益效果。
-
公开(公告)号:CN114546265B
公开(公告)日:2023-08-11
申请号:CN202210111367.5
申请日:2022-01-29
申请人: 苏州浪潮智能科技有限公司
IPC分类号: G06F3/06
摘要: 本发明提供一种快速容量均衡的方法、系统、设备和存储介质,方法包括:统计所有数据存储设备上的归置组的数量,并计算出每个数据存储设备上的平均归置组数;构建当前归置组数大于目标值数据存储设备列表和当前归置组数小于目标值数据存储设备列表,并构建当前归置组数小于目标值数据存储设备列表对应的故障域列表;遍历当前归置组数大于目标值数据存储设备列表中的每个数据存储设备以确定每个数据存储设备当前归置组数与平均归置组数的差值,对能够挪动的归置组进行遍历以确定能够替换当前归置组数小于目标值数据存储设备列表中成员的第一归置组,并根据第一归置组对当前数据存储设备进行更新。本发明大大降低整个容量均衡过程中的无效遍历动作。
-
公开(公告)号:CN112732192B
公开(公告)日:2023-01-10
申请号:CN202110027230.7
申请日:2021-01-09
申请人: 苏州浪潮智能科技有限公司
IPC分类号: G06F3/06
摘要: 本发明公开了一种磁盘分布信息裁剪方法,包括以下步骤:响应于当前系统满足裁剪条件,启动裁剪机制;响应于缓存新的磁盘全量分布信息,根据所述裁剪机制中预设的裁剪触发条件判断是否触发对当前的磁盘全量分布信息进行裁剪;响应于触发对当前的磁盘全量分布信息进行裁剪,获取裁剪参数;根据裁剪参数将对当前的磁盘全量分布信息进行裁剪。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明提出的方案可以降低故障时监控模块的数据库占用,提高监控模块运行的稳定性。
-
公开(公告)号:CN114443431A
公开(公告)日:2022-05-06
申请号:CN202210087994.X
申请日:2022-01-25
申请人: 苏州浪潮智能科技有限公司
摘要: 本发明提出了一种分布式存储系统故障恢复方法,满足第一预设数量要求时,标记待监测存储节点以及待监测存储节点中已故障的对象存储设备;当待监测存储节点故障恢复后,如果在预设时间周期内,满足第二预设数量要求时,对待监测存储节点中已恢复的对象存储设备统一进行状态变更,并取消待监测存储节点中已恢复的对象存储设备的故障标记以及待监测存储节点的故障标记;否则,等待预设时间周期后,对待监测存储节点中已恢复的对象存储设备统一进行状态变更,取消待监测存储节点中已恢复的对象存储设备的故障标记,本发明技术方案还提出了一种分布式存储系统故障恢复装置,降低对系统资源的占用,提高分布式存储集群的稳定性。
-
公开(公告)号:CN114443431B
公开(公告)日:2024-05-10
申请号:CN202210087994.X
申请日:2022-01-25
申请人: 苏州浪潮智能科技有限公司
摘要: 本发明提出了一种分布式存储系统故障恢复方法,满足第一预设数量要求时,标记待监测存储节点以及待监测存储节点中已故障的对象存储设备;当待监测存储节点故障恢复后,如果在预设时间周期内,满足第二预设数量要求时,对待监测存储节点中已恢复的对象存储设备统一进行状态变更,并取消待监测存储节点中已恢复的对象存储设备的故障标记以及待监测存储节点的故障标记;否则,等待预设时间周期后,对待监测存储节点中已恢复的对象存储设备统一进行状态变更,取消待监测存储节点中已恢复的对象存储设备的故障标记,本发明技术方案还提出了一种分布式存储系统故障恢复装置,降低对系统资源的占用,提高分布式存储集群的稳定性。
-
公开(公告)号:CN111708486B
公开(公告)日:2023-01-06
申请号:CN202010445414.0
申请日:2020-05-24
申请人: 苏州浪潮智能科技有限公司
IPC分类号: G06F3/06
摘要: 本发明公开了一种主放置组均衡优化的方法、系统、设备和存储介质,方法包括以下步骤:根据缓存盘的总容量和对象存储设备的总个数得到理论平均值;基于对象存储设备占用的实际容量与理论平均值得到对象存储设备对应的权重;获取当前主放置组的总个数,并基于当前主放置组的总个数和对象存储设备对应的权重得到预期均衡主放置组的数量;读取冗余组里的每个放置组的地址,基于每个放置组的地址和对象存储设备的地址得到对应的基值,响应于基值小于预定值,将放置组作为主放置组;重复上一步骤直到主放置组的数量达到预期均衡主放置组的数量。本发明提出的方案通过计算对象存储设备的权重来计算预期均衡主放置组的个数,从而优化系统性能。
-
公开(公告)号:CN114546265A
公开(公告)日:2022-05-27
申请号:CN202210111367.5
申请日:2022-01-29
申请人: 苏州浪潮智能科技有限公司
IPC分类号: G06F3/06
摘要: 本发明提供一种快速容量均衡的方法、系统、设备和存储介质,方法包括:统计所有数据存储设备上的归置组的数量,并计算出每个数据存储设备上的平均归置组数;构建当前归置组数大于目标值数据存储设备列表和当前归置组数小于目标值数据存储设备列表,并构建当前归置组数小于目标值数据存储设备列表对应的故障域列表;遍历当前归置组数大于目标值数据存储设备列表中的每个数据存储设备以确定每个数据存储设备当前归置组数与平均归置组数的差值,对能够挪动的归置组进行遍历以确定能够替换当前归置组数小于目标值数据存储设备列表中成员的第一归置组,并根据第一归置组对当前数据存储设备进行更新。本发明大大降低整个容量均衡过程中的无效遍历动作。
-
公开(公告)号:CN116700634B
公开(公告)日:2023-11-03
申请号:CN202310988513.7
申请日:2023-08-08
申请人: 苏州浪潮智能科技有限公司
摘要: 本申请提供一种分布式存储系统垃圾回收方法、装置及分布式存储系统,该方法包括:获取分布式存储系统的历史运行数据;根据历史运行数据,确定分布式存储系统的性能指标及当前业务压力;根据性能指标与当前业务压力之间的大小关系,确定目标垃圾回收策略;按照目标垃圾回收策略,确定分布式存储系统的目标垃圾回收参数,以基于目标垃圾回收参数对分布式存储系统进行垃圾回收。上述方案提供的方法,通过综合考虑分布式存储系统的性能指标及当前业务压力,设定目标垃圾回收参数,以避免出现垃圾回收影响分布式存储系统对业务的正常处理,从而提高了分布式存储系统的稳定性。
-
公开(公告)号:CN116700634A
公开(公告)日:2023-09-05
申请号:CN202310988513.7
申请日:2023-08-08
申请人: 苏州浪潮智能科技有限公司
摘要: 本申请提供一种分布式存储系统垃圾回收方法、装置及分布式存储系统,该方法包括:获取分布式存储系统的历史运行数据;根据历史运行数据,确定分布式存储系统的性能指标及当前业务压力;根据性能指标与当前业务压力之间的大小关系,确定目标垃圾回收策略;按照目标垃圾回收策略,确定分布式存储系统的目标垃圾回收参数,以基于目标垃圾回收参数对分布式存储系统进行垃圾回收。上述方案提供的方法,通过综合考虑分布式存储系统的性能指标及当前业务压力,设定目标垃圾回收参数,以避免出现垃圾回收影响分布式存储系统对业务的正常处理,从而提高了分布式存储系统的稳定性。
-
-
-
-
-
-
-
-
-