一种基于RAID4的多云存储系统扩展方法

    公开(公告)号:CN106027653B

    公开(公告)日:2019-04-12

    申请号:CN201610344015.9

    申请日:2016-05-23

    Abstract: 本发明公开了一种基于RAID4的多云存储系统扩展方法,包括:云用户从本地上传文件数据到已注册并购买服务的各个云的对象存储服务,数据块在各个云之间以RAID4方式存储。当用户由于某些原因需要将已有云中的数据迁移一部分到新的云中,并保持云之间的数据仍以RAID4方式存储时,从存储原始数据的云中选择一部分数据迁移到新的云中,并将一部分迁移的数据发送到校验云中,运用校验云的计算资源计算得出新的校验块以保证新的多云存储系统仍然保持RAID4方式存储。本发明中云的概念也可以扩展为不同云的不同存储区域。本发明是基于RAID4方式存储,故能容“1”错;另外,通过耗费校验云的计算资源来换取带宽资源,减少因扩展带来的迁移数据量。

    一种打包文件备份过程中数据去重碎片消除方法

    公开(公告)号:CN109408288A

    公开(公告)日:2019-03-01

    申请号:CN201811148083.3

    申请日:2018-09-29

    Abstract: 本发明公开了一种打包文件备份过程中数据去重碎片消除方法,由于打包数据集的特性,导致大量被重写的碎片块在之后的备份过程中,仍然被识别为碎片块,因此被重写算法不断地重复重写,这种被反复重写的碎片块,我们称为持久性碎片块,它会严重降低系统的恢复性能。因此我们首先识别持久性碎片块,然后构建了碎片容器用于存储持久性碎片块、正常容器用于存储非持久性碎片块。大量持久性碎片块不是碎片块,写入碎片块数量会减小,容器的平均利用率会增加,重复重写率得到下降;容器包含了更多的有效块,需要读取的容器数量减少了,恢复性能得到显著提高。

    一种对象存储系统中基于RAID5的安全认证方法

    公开(公告)号:CN105404560B

    公开(公告)日:2019-01-04

    申请号:CN201510744366.4

    申请日:2015-11-05

    Abstract: 本发明公开了一种对象存储系统中基于RAID5的安全认证方法。该方法包括:利用RAID5安全可靠低成本的特性,在对象存储系统的关键路径TA上设置N台TA服务器,然后将N台TA服务器上的存储资源整合,并在其上部署RAID5。当客户端发来认证请求时,TA Controller首先对认证请求赋予ID,并对ID进行取模运算,选择一台目标TA服务器对Client端认证请求进行处理,将认证请求处理结果返回到TA Controller中。TA Controller将处理结果存入RAID5中,按照RAID5的存取机制进行数据存取。冗余TA服务器可以有效地防止单点故障,同时,RAID5又可保证数据丢失时的快速恢复,保证TA端用户数据的安全性和服务的可靠性。本发明能大幅度地提高TA端数据的安全可靠性。

    一种基于代理协助再生码的存储节点修复方法

    公开(公告)号:CN108923960A

    公开(公告)日:2018-11-30

    申请号:CN201810633934.7

    申请日:2018-06-20

    Abstract: 本发明公开了一种基于代理协助再生码的存储节点修复方法,属于分布式存储系统领域。本发明为了恢复故障节点中的数据,首先代理服务器从存活节点中下载所需数据块,然后对于所有数据块在代理服务器中进行编码,最终将编码数据块上传至新的节点,从而完成数据的恢复。本发明方法在保证数据高可靠和低冗余度的基础上,保证原始数据和经多轮修复后的数据均满足MDS特性。本方法在分布式节点不需解码操作恢复数据的同时,可进一步降低修复带宽。

    一种基于混合编码的hadoop数据分发方法

    公开(公告)号:CN106027638A

    公开(公告)日:2016-10-12

    申请号:CN201610330144.2

    申请日:2016-05-18

    CPC classification number: H04L67/1097 H04L67/1095

    Abstract: 本发明公开了一种基于混合编码的hadoop数据分发方法。该方法包括,改变传统的hadoop系统中的三副本存储方式,结合RAID1和RAID5技术对数据进行分发存储,当用户将文件写入集群,文件被划分为多个block存储在集群中。根据RAID1的概念,每个block会生成一个副本,设定一个stripe长度将block进行存储,一个stripe中的block及其副本分别放置在不同机架下的节点中,根据RAID5将一个stripe中的block进行异或产生一个校验块,校验块同样也遵循RAID1的方式进行存储。在节点损坏导致block丢失时,可以根据副本或校验块对文件进行恢复,保证文件存储的可靠性。本发明是基于RAID1+5方式存储,故有较好的容错性能,另外,使用RAID1+5的混合模式相较于传统hadoop的三副本存储方式节省了存储空间。

Patent Agency Ranking