-
公开(公告)号:CN110457163B
公开(公告)日:2022-05-03
申请号:CN201910605476.0
申请日:2019-07-05
Applicant: 苏州元核云技术有限公司
Abstract: 本发明公开了一种分布式块存储的数据恢复方法、装置及存储介质。其中,一种分布式块存储的数据恢复方法包括以下步骤:S1、读取存储服务器的磁盘并获取块存储设备镜像的原始存储单元文件集,对所述存储单元文件集中的冗余文件去重;S2、将所述存储单元文件集中的存储单元文件未达到存储单元文件大小最大值的进行写零填充;S3存储单元文件按照逻辑地址顺序依次按编号进行重命名,按照条带单元大小及条带宽度读取存储单元文件并写入新镜像文件;S4、将所述新镜像文件恢复到所述块存储设备。通过读取存储单元文件集,并对存储单元文件进行去重、写零操作以及重组,解决了分布式块存储在灾难情况下的数据恢复,保证数据的安全。
-
公开(公告)号:CN112530505A
公开(公告)日:2021-03-19
申请号:CN202011596261.6
申请日:2020-12-29
Applicant: 苏州元核云技术有限公司
Abstract: 本申请公开了一种硬盘延迟检测方法、装置及计算机可读存储介质。本申请的硬盘延迟检测方法包括:获取待检测硬盘的属性数据;属性数据包括硬盘标识、性能数据、当前延迟数据;根据属性数据划分为训练集和测试集;将测试集输入到预设的延迟检测神经网络中进行测试,以得到预测延迟数据;延迟检测神经网络通过训练集训练得到;根据待检测硬盘的当前延迟数据、预测延迟数据计算延迟差值;根据延迟差值、预设的延迟阈值找到高延迟硬盘。该方法利用机器学习模型,来预测硬盘在某一时刻的预期延迟,提升了硬盘延迟检测的效率。
-
公开(公告)号:CN112328461A
公开(公告)日:2021-02-05
申请号:CN202011176694.6
申请日:2020-10-29
Applicant: 无锡先进技术研究院 , 苏州元核云技术有限公司
IPC: G06F11/34
Abstract: 本发明公开了一种基于分布式存储的性能瓶颈预测方法、设备及存储介质,其中基于分布式存储的性能瓶颈预测方法包括:获取影响存储节点的影响因子的工作状态;根据所述工作状态判断所述影响因子异常并记录所述影响因子的异常次数;若所述异常次数超过预设异常次数阈值,输出所述存储节点的性能瓶颈信息。本发明通过获取影响存储节点的影响因子的工作状态,并根据工作状态判断影响因子的异常情况并记录影响因子的异常次数,若异常次数超过预设异常次数阈值,则输出性能瓶颈信息,一方面得出更加准确的性能瓶颈信息,另一方面以便于用户能够根据性能瓶颈信息准确地进行系统扩容,从而避免系统故障。
-
公开(公告)号:CN110457163A
公开(公告)日:2019-11-15
申请号:CN201910605476.0
申请日:2019-07-05
Applicant: 苏州元核云技术有限公司
Abstract: 本发明公开了一种分布式块存储的数据恢复方法、装置及存储介质。其中,一种分布式块存储的数据恢复方法包括以下步骤:S1、读取存储服务器的磁盘并获取块存储设备镜像的原始存储单元文件集,对所述存储单元文件集中的冗余文件去重;S2、将所述存储单元文件集中的存储单元文件未达到存储单元文件大小最大值的进行写零填充;S3存储单元文件按照逻辑地址顺序依次按编号进行重命名,按照条带单元大小及条带宽度读取存储单元文件并写入新镜像文件;S4、将所述新镜像文件恢复到所述块存储设备。通过读取存储单元文件集,并对存储单元文件进行去重、写零操作以及重组,解决了分布式块存储在灾难情况下的数据恢复,保证数据的安全。
-
公开(公告)号:CN112328171A
公开(公告)日:2021-02-05
申请号:CN202011146994.X
申请日:2020-10-23
Applicant: 苏州元核云技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种数据分布预测方法、数据均衡方法、设备及存储介质,其中方法包括:读取集群数据中当前存储盘的自然分布状态;根据当前存储盘的所述自然分布状态,得到集群数据的最小分布方差;根据逻辑单元抽取存储盘以预测数据分布,根据预测数据分布获取构建存储盘与构建存储盘的构建分布状态;根据若干构建存储盘的构建分布状态,得到构建分布方差;将构建分布方差与最小分布方差比较以得到比较结果,根据比较结果确定优化权重表。本发明通过获取最小分布方差和构建分布方差后,以确定优化权重表,以自动预测优化权重表,以便于用于根据优化权重表设置存储盘的权重,进而调节数据分布的均衡性,既提高了数据分布的均衡性,又省时省力。
-
公开(公告)号:CN110865868A
公开(公告)日:2020-03-06
申请号:CN201911002058.9
申请日:2019-10-21
Applicant: 苏州元核云技术有限公司
Inventor: 王刚
IPC: G06F9/455 , H04L12/403
Abstract: 本发明公开了一种低延迟控制方法、装置及其设备,其中方法包括:通过调用用户态的API接口进行UIO设备的注册,将UIO设备注册至处理器的内核态,以构建用户态和网卡之间的网络数据包传输架构;用户态读取UIO设备的注册信息并将注册信息映射至用户态的进程空间;用户态根据轮询驱动模式程序轮询网卡;接收网卡发送的网络数据包并进行处理与校验。通过注册UIO设备以构建网络数据宝传输架构,以在用户态直接读取网卡发送的网络数据包,从而快速对网络数据包进行处理,同时轮询处理网络数据包发送与接收,减少终端带来数据驱动的延迟,从而提高处理器做数据处理的效率。
-
公开(公告)号:CN110837482A
公开(公告)日:2020-02-25
申请号:CN201911001096.2
申请日:2019-10-21
Applicant: 苏州元核云技术有限公司
Inventor: 王刚
IPC: G06F13/16
Abstract: 本发明公开了分布式块存储低延迟控制方法、系统及设备,方法包括以下步骤:获取用户设备驱动程序的应用编程接口,应用编程接口与用户设备之间发送和接收数据包,并形成数据描述符环且包括发送数据描述符环和接收数据描述符环;轮询逻辑核心通过应用编程接口轮询一个或多个用户设备端口的接收数据描述符环并通过接收数据描述符环发送数据包至处理逻辑核心;处理逻辑核心根据策略规则接收数据包并进行处理;通过应用编程接口将处理后的数据包在用户设备端口的发送数据描述符环上进行传输。通过采用轮询模式代替中断模式的技术手段,克服现有技术中存在由于中断导致IO延迟严重的技术问题,避免了中断带来的延时和开销,提高端口处理效率且降低端口的延迟。
-
公开(公告)号:CN112328171B
公开(公告)日:2024-04-30
申请号:CN202011146994.X
申请日:2020-10-23
Applicant: 苏州元核云技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种数据分布预测方法、数据均衡方法、设备及存储介质,其中方法包括:读取集群数据中当前存储盘的自然分布状态;根据当前存储盘的所述自然分布状态,得到集群数据的最小分布方差;根据逻辑单元抽取存储盘以预测数据分布,根据预测数据分布获取构建存储盘与构建存储盘的构建分布状态;根据若干构建存储盘的构建分布状态,得到构建分布方差;将构建分布方差与最小分布方差比较以得到比较结果,根据比较结果确定优化权重表。本发明通过获取最小分布方差和构建分布方差后,以确定优化权重表,以自动预测优化权重表,以便于用于根据优化权重表设置存储盘的权重,进而调节数据分布的均衡性,既提高了数据分布的均衡性,又省时省力。
-
公开(公告)号:CN110865868B
公开(公告)日:2024-02-23
申请号:CN201911002058.9
申请日:2019-10-21
Applicant: 苏州元核云技术有限公司
Inventor: 王刚
IPC: G06F9/455 , H04L12/403
Abstract: 本发明公开了一种低延迟控制方法、装置及其设备,其中方法包括:通过调用用户态的API接口进行UIO设备的注册,将UIO设备注册至处理器的内核态,以构建用户态和网卡之间的网络数据包传输架构;用户态读取UIO设备的注册信息并将注册信息映射至用户态的进程空间;用户态根据轮询驱动模式程序轮询网卡;接收网卡发送的网络数据包并进行处理与校验。通过注册UIO设备以构建网络数据宝传输架构,以在用户态直接读取网卡发送的网络数据包,从而快速对网络数据包进行处理,同时轮询处理网络数据包发送与接收,减少终端带来数据驱动的延迟,从而提高处理器做数据处理的效率。
-
公开(公告)号:CN112395132A
公开(公告)日:2021-02-23
申请号:CN202011265920.8
申请日:2020-11-13
Applicant: 苏州元核云技术有限公司
IPC: G06F11/14
Abstract: 本发明公开了一种文件备份的方法、装置及计算机存储介质,涉及文件处理领域。方法应用于文件备份终端包括:接收文件备份源端发送的封装了备份文件的数据包;将数据包根据文件传输协议进行解析,得到至少一个备份文件;获取每一备份文件的文件信息,将文件信息与预设的备份策略进行匹配;根据匹配数据,将备份文件存储至备份策略中设定的存储位置;发送备份文件的备份状态。应用于文件备份源端的方法包括:获取至少一个需要备份的备份文件;根据备份文件的大小,将一个或者多个备份文件进行封装后,得到若干备份数据;将每一备份数据经文件传输协议处理后发送;根据备份文件的备份状态进行进度处理;从而提升对备份文件的管理的便利性。
-
-
-
-
-
-
-
-
-