数据存储、分散、重构、回收方法、装置及数据处理系统

    公开(公告)号:CN108628539A

    公开(公告)日:2018-10-09

    申请号:CN201710162001.X

    申请日:2017-03-17

    CPC classification number: G06F3/06

    Abstract: 本发明实施例公开了一种数据存储、分散、重构、回收方法、装置及数据处理系统,应用该存储方法,将待存储数据的各个数据片段分别存储至各个存储对象中,存储对象为存储数据的最小单元,各个存储对象中存储的数据片段份数的差值小于第一预设阈值,也就是说,本方案中,较均匀地将各个数据片段存储至多个存储对象中,能够避免一个存储对象出现故障,同一数据的多部分数据片段全部丢失,导致无法对该数据进行数据恢复的情况。

    一种云存储系统、媒体数据存储方法及系统

    公开(公告)号:CN108600281A

    公开(公告)日:2018-09-28

    申请号:CN201710158154.7

    申请日:2017-03-16

    Abstract: 本发明实施例提供了一种云存储系统、媒体数据存储方法及系统。一种媒体数据存储方法,应用于图像采集设备,该图像采集设备中预先存储有第一网络地址,该第一网络地址为云存储系统的对外访问地址;该方法包括:基于该第一网络地址,向该云存储系统请求得到第二网络地址;在获得该第二网络地址后,基于该第二网络地址,将待存储的目标媒体数据上传至该云存储系统,以使得:该云存储系统存储该目标媒体数据,并将该目标媒体数据对应的目标存储信息发送至该图像采集设备对应的平台服务器。可见,通过本方案可以降低网络带宽资源的消耗以及提高媒体数据上传效率。

    一种数据校验、存储方法及装置

    公开(公告)号:CN108573172A

    公开(公告)日:2018-09-25

    申请号:CN201710134998.8

    申请日:2017-03-08

    Abstract: 本发明实施例公开了一种数据校验、存储方法及装置,存储对象中对应存储有各个数据段及数据段的第一校验值;当需要获取目标数据时,在存储对象中确定组成目标数据的N个目标数据段;依次读取M个目标数据段及其第一校验值,M小于N;也就是说,每次读取一部分目标数据段,对这一部分目标数据段进行校验,得到各个第二校验值;如果这一部分目标数据段的第一校验值与对应的第二校验值全部相同,继续获取下一部分目标数据段。由此可见,本方案中,将目标数据分段下载及校验,校验速度快、效率高;另外,当某一部分目标数据段的第一校验值与对应的第二校验值不全相同时,不再继续下载校验其他目标数据段,减少了大量无意义的操作。

    一种磁盘数据读写方法及装置

    公开(公告)号:CN108062200A

    公开(公告)日:2018-05-22

    申请号:CN201610979543.1

    申请日:2016-11-08

    Abstract: 本发明实施例公开了一种磁盘数据读写方法及装置,磁盘包括:存储元数据的主元数据块、备份元数据的备元数据块和至少一个对象块组,每一对象块组包括:存储对象数据的数据块和存储对象数据的索引的索引块;所述主元数据块位于所述磁盘的头部;所述备元数据块位于所述磁盘的尾部;所述至少一个对象块组位于所述主元数据块和所述备元数据块之间;在读写对象数据时,可以分别操作索引块中的索引、主元数据块中的元数据、以及备元数据块中的备份元数据。应用本发明实施例,增加了磁盘的使用寿命和安全性。

    一种视频数据处理方法、装置及系统

    公开(公告)号:CN108023746A

    公开(公告)日:2018-05-11

    申请号:CN201610943729.1

    申请日:2016-11-02

    Abstract: 本发明提供了一种视频数据处理方法、装置及系统,该方法中,检测是否存在故障的视频云存储系统,如果是,从未故障的视频云存储系统中查找指定的视频云存储系统,发送视频数据存储切换指令至指定的视频云存储系统,其中,视频数据存储切换指令中包括故障的视频云存储系统对应的视频采集设备的地址信息,以使指定的视频云存储系统接收并存储地址信息对应的视频采集设备发送的视频数据。本发明中,通过设置与多个视频云存储系统通信连接的云中心服务器对视频云存储系统进行统一管理,以在视频云存储系统中的存储服务器/管理服务器故障时对视频数据进行处理,避免了视频数据的丢失,保证了存储的视频数据的连续性和完整性。

    一种数据存储、读取、清理方法、装置及云存储系统

    公开(公告)号:CN107967117A

    公开(公告)日:2018-04-27

    申请号:CN201610911405.X

    申请日:2016-10-20

    Abstract: 本发明实施例公开了一种数据存储、读取、清理方法、装置及云存储系统,将存储节点中的存储块组成一个一个的资源池,以资源池为单位进行数据的存储、读取和清理,减少了管理的工作量。特别是数据清理时,仅对每个资源池中的数据进行清理,具体的,针对每个资源池,确定资源池中被占用的存储块的第一数量;判断第一数量是否符合预设数据清理条件;如果是,向该资源池中的每个被占用的第二存储块所在的存储节点发送清理数据指令,以使该存储节点对自身包括的第二存储块中存储的数据进行清理。也就是说,管理节点确定资源池中被占用的存储块的数量,当该数量符合预设数据清理条件时,对存储块中的数据进行清理,过程简单,减少了管理节点的工作量。

    一种文件存储方法及装置
    38.
    发明公开

    公开(公告)号:CN107870940A

    公开(公告)日:2018-04-03

    申请号:CN201610856834.1

    申请日:2016-09-28

    CPC classification number: G06F11/14 G06F17/30 G06F17/30073 G06F11/1469

    Abstract: 本发明实施例公开了一种文件存储方法及装置,该方法包括:接收针对待存储文件的存储请求;确定用于存储所述待存储文件的目标键;根据所确定的目标键,获得所述待存储文件的待存储元数据;所述待存储元数据包括:固定子元数据和可变子元数据;将所述待存储元数据存储至元数据库,以及将所述固定子元数据存储至所确定的目标键的名字中,将所述可变子元数据存储至所确定的目标键对应的预设存储区域,并将所述待存储文件存储至所确定的目标键的值中。应用本发明实施例,有效地保证了元数据的恢复的同时,节约了存储终端的存储空间。

    存储空间回收方法及装置
    39.
    发明公开

    公开(公告)号:CN107229414A

    公开(公告)日:2017-10-03

    申请号:CN201610175965.3

    申请日:2016-03-24

    Abstract: 本发明实施例提供了存储空间回收方法及装置。其中,该方法包括:在满足预定空间回收条件时,确定具有待回收标识的目标数据块,待回收标识为:对具有满块标识且空间利用率低于预定利用率阈值的数据块所设置的标识;生成占用段链表和空闲段链表,空闲段链表包括:具有删除标识的数据段所对应的段标识,占用段链表包括:满足预定占用条件的数据段所对应的段标识,预定占用条件为:未具有删除标识且段起始偏移大于空闲段链表所涵盖数据段的段起始偏移中的最小值;基于空闲段链表和占用段链表,对目标数据块执行块内数据迁移;将块内数据迁移完毕的目标数据块更新为空间回收完成的数据块。通过方案,可以降低数据的移动量较大且提高存储资源利用率。

    一种数据存储方法及装置
    40.
    发明公开

    公开(公告)号:CN107153508A

    公开(公告)日:2017-09-12

    申请号:CN201610120859.5

    申请日:2016-03-03

    CPC classification number: G06F3/0619 G06F3/0638 G06F11/1016 G06F11/1052

    Abstract: 本发明实施例公开了一种数据存储方法及装置,应用于存储设备,存储设备包括:元数据存储区域,该方法包括:接收数据存储请求,确定该数据存储请求中包含的待存储数据的目标存储位置,并判断目标存储位置是否在元数据存储区域内,若在元数据存储区域内,则判断待存储数据是否为元数据,若为是,则在满足预设存储条件的情况下将待存储数据存储至目标存储位置,若为否,则拒绝待存储数据存储至目标存储位置。应用本发明实施例提供的技术方案存储数据,提高了存储系统的可靠性。

Patent Agency Ranking