-
公开(公告)号:CN118672518B
公开(公告)日:2025-02-14
申请号:CN202411162437.5
申请日:2024-08-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开一种分布式存储系统数据处理方法、程序产品、装置及介质,涉及分布式存储系统技术领域,用于实现分布式存储系统的数据处理,针对目前系统中由网卡性能上限所带来的性能瓶颈,提供一种分布式存储系统数据处理方法,通过在客户端中预先部署纠删码计算模块、订阅存储池中的数据分布map更新,实现将对业务数据的纠删码计算和分布计算过程从主节点上拉到客户端中实现。由客户端直接向存储节点下发相应的传输子任务,以省略其中客户端向主节点发送业务数据的流程,也即可以使网卡省去一次业务数据量的数据传输,从而减轻网卡负担,可以缓解由网卡上限所带来的分布式存储系统性能瓶颈。
-
公开(公告)号:CN119003233A
公开(公告)日:2024-11-22
申请号:CN202411197002.4
申请日:2024-08-29
Applicant: 济南浪潮数据技术有限公司
Abstract: 本发明公开一种磁盘故障扩散处理方法、装置及介质,涉及分布式存储系统技术领域,用于解决目前在进行慢盘检测时可能出现的故障扩散问题。本发明提供的一种磁盘故障扩散处理方法,通过定时对慢盘检出功能所检测出的故障盘进行健康检测;判断其是否为由板卡连接的其它故障盘所引起故障扩散的正常盘;若是,则通过存储系统的磁盘扩容功能,重新将该磁盘加入到磁盘拓扑中,并重启该磁盘的OSD服务,恢复其正常运行以提供存储功能。本方法可以有效地解决慢盘检出功能在检出单盘故障后的故障扩散问题,可以将状态正常却因故障扩散而被终止OSD服务、移除存储系统的磁盘重新恢复工作,避免故障扩散所带来的OSD服务宕机、客户数据丢失等严重问题。
-
公开(公告)号:CN118672518A
公开(公告)日:2024-09-20
申请号:CN202411162437.5
申请日:2024-08-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开一种分布式存储系统数据处理方法、程序产品、装置及介质,涉及分布式存储系统技术领域,用于实现分布式存储系统的数据处理,针对目前系统中由网卡性能上限所带来的性能瓶颈,提供一种分布式存储系统数据处理方法,通过在客户端中预先部署纠删码计算模块、订阅存储池中的数据分布map更新,实现将对业务数据的纠删码计算和分布计算过程从主节点上拉到客户端中实现。由客户端直接向存储节点下发相应的传输子任务,以省略其中客户端向主节点发送业务数据的流程,也即可以使网卡省去一次业务数据量的数据传输,从而减轻网卡负担,可以缓解由网卡上限所带来的分布式存储系统性能瓶颈。
-
公开(公告)号:CN113886365A
公开(公告)日:2022-01-04
申请号:CN202111227746.2
申请日:2021-10-21
Applicant: 济南浪潮数据技术有限公司
Inventor: 赵嘉祺
IPC: G06F16/21 , G06F16/215 , G06F16/22 , G06F11/14
Abstract: 本申请公开了一种数据迁移方法、装置、电子设备及可读存储介质。其中,方法包括当检测到存储系统的目标设备发生故障,获取目标设备的目标存储文件;对每个目标存储文件,分别计算当前目标存储文件的文件名与存储系统的正常设备的设备名之间的哈希值,选择最大哈希值对应的正常设备作为当前目标存储文件的迁移目的端;并记录各目标存储文件和相应迁移目的端之间的对应关系;将各目标存储文件备份至相应的迁移目的端。本申请可将存储设备的故障设备的数据迁移至正常设备上,且不会发生正常设备之间的数据迁移的现象。
-
公开(公告)号:CN119200997A
公开(公告)日:2024-12-27
申请号:CN202411352905.5
申请日:2024-09-26
Applicant: 济南浪潮数据技术有限公司
Abstract: 本申请涉及一种归置组分裂扩容方法、装置、计算机设备及存储介质。所述方法包括:获取集群运行信息,计算得到第一归置组数量;对所述第一归置组数量进行可行性评估,得到可行性评估结果;响应于所述可行性评估结果为可行,基于所述第一归置组数量,进行归置组分裂方案设计,得到归置组分裂方案;根据所述归置组分裂方案,创建若干新归置组;基于渐进式均衡方法,对所述若干新归置组进行均衡分布。采用本方法能够动态智能调整归置组数量,根据集群实际运行状态进行均衡调整,实现扩容后的资源合理分配,提升集群的扩展性和稳定性。
-
公开(公告)号:CN117294628A
公开(公告)日:2023-12-26
申请号:CN202311266957.6
申请日:2023-09-27
Applicant: 济南浪潮数据技术有限公司
IPC: H04L43/10 , H04L43/0811 , H04L41/06 , H04L67/1097
Abstract: 本发明涉及计算机科学与技术领域,公开了一种分布式存储系统的网口异常处理方法及设备。第一OSD可以在启动时,获取所述第一存储节点在所述第一网络中的网络地址,第一OSD根据所述网络地址调用所述第一存储节点的操作系统,确定物理网口并对所述物理网口的网口状态进行检测,当检测到所述物理网口的网口状态为异常状态时,第一OSD停止生成心跳消息,以及停止向所述第二OSD发送心跳消息。第一OSD可以在物理网口异常导致后端网络故障时,停止生成心跳消息,避免心跳消息对内存的占用,减少对内存使用量,有效保证存储系统稳定性。
-
-
-
-
-