数据处理的方法和系统
    1.
    发明授权

    公开(公告)号:CN109165117B

    公开(公告)日:2022-05-31

    申请号:CN201810700362.X

    申请日:2018-06-29

    Inventor: 任仁 杨忠兵

    Abstract: 本发明提供一种数据处理的方法,应用该方法的存储系统包括主节点、备节点和存储池。该方法包括:该备节点接收该主节点拷贝的元数据。主节点发生故障后,该备节点接收数据恢复指令,确定该主节点中的元数据未全部被拷贝至该备节点。该备节点从该存储池中获取第一元数据的第一元数据日志,该第一元数据未从该主节点同步至该备节点,根据该第一元数据日志恢复该第一元数据,将该第一元数据存储至该存储池。主节点发生故障时,不需要从存储池中恢复所有未存储的元数据,缩短了元数据恢复的时间,使得业务切换至备节点的过程更加平滑,减少了数据切换对用户读写的影响。

    一种管理日志的方法和装置

    公开(公告)号:CN109710498B

    公开(公告)日:2020-09-29

    申请号:CN201711021894.2

    申请日:2017-10-26

    Inventor: 王霖 杨忠兵

    Abstract: 本申请公开了一种管理日志的方法和装置,涉及计算机技术领域,有助于节省刷盘所耗费的时间。该方法应用于缓存,缓存包括缓存控制器和日志盘,缓存控制器用于将数据保存到日志盘,日志盘包括多条日志,每条日志对应一个快照操作的数据或一个IO操作的数据;方法包括:接收IO操作,并获取第一时间标签;在确定第一时间标签早于系统时间的当前值的情况下,为该IO操作配置第二时间标签,系统时间指示缓存控制器进行快照操作的时间,缓存控制器每进行一次快照操作,系统时间相应更新一次,第二时间标签为执行第二时间标签配置操作时的系统时间或执行第二时间标签配置操作时的操作时间;将该IO操作的数据写入日志盘,该IO操作的数据包括第二时间标签。

    快照处理方法和快照处理装置

    公开(公告)号:CN107798063B

    公开(公告)日:2020-12-15

    申请号:CN201710851350.2

    申请日:2017-09-20

    Inventor: 李勇 杨忠兵 涂妍

    Abstract: 本申请提供了快照处理方法和快照处理装置。该快照处理方法包括:对基卷当前存储的元数据与上一个快照卷对应的、基卷的完整元数据进行异或操作;对异或操作得到的结果进行压缩操作;记录压缩操作得到的结果,得到基卷当前存储的元数据的快照卷。本申请提供的快照的处理方法和处理装置,有助于节省快照的存储空间。

    一种元数据查询方法及装置

    公开(公告)号:CN110018983A

    公开(公告)日:2019-07-16

    申请号:CN201710889269.3

    申请日:2017-09-27

    Inventor: 李勇 杨忠兵 涂妍

    Abstract: 本申请提供一种元数据查询方法及装置,涉及数据存储领域,用于提高元数据的查找效率。该方法应用于链式快照中,包括:接收包括第一快照卷的卷标识和数据块标识的元数据查询请求;根据第一快照卷的卷标识,从第一快照卷中获取用于指示第一快照卷的创建时序的第一时序标识;根据数据块标识和第一时序标识查询历史索引信息,历史索引信息中包括查询数据块标识与历史查询快照信息之间的对应关系,历史查询快照信息用于指示查询卷标识和查询时序区间;当历史索引信息中存在数据块标识,且第一时序标识在对应的查询时序区间时,从历史索引信息中获取对应的目标卷标识,并从目标卷标识所指示的第二快照卷中获取数据块标识对应的地址元数据。

    文件截断方法和装置
    5.
    发明授权

    公开(公告)号:CN104462403B

    公开(公告)日:2018-03-02

    申请号:CN201410763438.5

    申请日:2014-12-11

    Inventor: 叶茂 杨忠兵

    CPC classification number: G06F17/30

    Abstract: 本发明提供一种文件截断方法和装置。方法包括:接收客户端发送的文件截断指令,所述指令包括待截断文件的标识,所述待截断文件包括数据块,所述指令用于指示释放所述数据块的空间;根据所述标识确定所述待截断文件;对所述待截断文件加锁;创建所述待截断文件对应的位图;所述位图创建之后,对所述待截断文件解锁;在向所述客户端发送所述指令的响应消息之后,释放所述数据块的空间,并在所述位图记录所述数据块的标识,以及记录所述数据块的空间已释放。本发明的文件截断方法和装置,能够快速对用户返回截断成功,解决了现有文件截断过程太慢影响其它操作的问题。

    文件截断方法和装置
    6.
    发明公开

    公开(公告)号:CN104462403A

    公开(公告)日:2015-03-25

    申请号:CN201410763438.5

    申请日:2014-12-11

    Inventor: 叶茂 杨忠兵

    CPC classification number: G06F17/30 G06F17/30117 G06F3/067

    Abstract: 本发明提供一种文件截断方法和装置。方法包括:接收客户端发送的文件截断指令,所述指令包括待截断文件的标识,所述待截断文件包括数据块,所述指令用于指示释放所述数据块的空间;根据所述标识确定所述待截断文件;对所述待截断文件加锁;创建所述待截断文件对应的位图;所述位图创建之后,对所述待截断文件解锁;在向所述客户端发送所述指令的响应消息之后,释放所述数据块的空间,并在所述位图记录所述数据块的标识,以及记录所述数据块的空间已释放。本发明的文件截断方法和装置,能够快速对用户返回截断成功,解决了现有文件截断过程太慢影响其它操作的问题。

    一种元数据查询方法及装置

    公开(公告)号:CN110018983B

    公开(公告)日:2021-07-16

    申请号:CN201710889269.3

    申请日:2017-09-27

    Inventor: 李勇 杨忠兵 涂妍

    Abstract: 本申请提供一种元数据查询方法及装置,涉及数据存储领域,用于提高元数据的查找效率。该方法应用于链式快照中,包括:接收包括第一快照卷的卷标识和数据块标识的元数据查询请求;根据第一快照卷的卷标识,从第一快照卷中获取用于指示第一快照卷的创建时序的第一时序标识;根据数据块标识和第一时序标识查询历史索引信息,历史索引信息中包括查询数据块标识与历史查询快照信息之间的对应关系,历史查询快照信息用于指示查询卷标识和查询时序区间;当历史索引信息中存在数据块标识,且第一时序标识在对应的查询时序区间时,从历史索引信息中获取对应的目标卷标识,并从目标卷标识所指示的第二快照卷中获取数据块标识对应的地址元数据。

    一种管理日志的方法和装置

    公开(公告)号:CN109710498A

    公开(公告)日:2019-05-03

    申请号:CN201711021894.2

    申请日:2017-10-26

    Inventor: 王霖 杨忠兵

    Abstract: 本申请公开了一种管理日志的方法和装置,涉及计算机技术领域,有助于节省刷盘所耗费的时间。该方法应用于缓存,缓存包括缓存控制器和日志盘,缓存控制器用于将数据保存到日志盘,日志盘包括多条日志,每条日志对应一个快照操作的数据或一个IO操作的数据;方法包括:接收IO操作,并获取第一时间标签;在确定第一时间标签早于系统时间的当前值的情况下,为该IO操作配置第二时间标签,系统时间指示缓存控制器进行快照操作的时间,缓存控制器每进行一次快照操作,系统时间相应更新一次,第二时间标签为执行第二时间标签配置操作时的系统时间或执行第二时间标签配置操作时的操作时间;将该IO操作的数据写入日志盘,该IO操作的数据包括第二时间标签。

    数据处理的方法和系统
    9.
    发明公开

    公开(公告)号:CN109165117A

    公开(公告)日:2019-01-08

    申请号:CN201810700362.X

    申请日:2018-06-29

    Inventor: 任仁 杨忠兵

    Abstract: 本发明提供一种数据处理的方法,应用该方法的存储系统包括主节点、备节点和存储池。该方法包括:该备节点接收该主节点拷贝的元数据。主节点发生故障后,该备节点接收数据恢复指令,确定该主节点中的元数据未全部被拷贝至该备节点。该备节点从该存储池中获取第一元数据的第一元数据日志,该第一元数据未从该主节点同步至该备节点,根据该第一元数据日志恢复该第一元数据,将该第一元数据存储至该存储池。主节点发生故障时,不需要从存储池中恢复所有未存储的元数据,缩短了元数据恢复的时间,使得业务切换至备节点的过程更加平滑,减少了数据切换对用户读写的影响。

    一种数据存储方法及装置
    10.
    发明公开

    公开(公告)号:CN106170757A

    公开(公告)日:2016-11-30

    申请号:CN201480016989.3

    申请日:2014-11-29

    CPC classification number: G06F3/06

    Abstract: 本发明公开了一种数据存储方法及装置,涉及电子信息领域,能够在实现数据实时迁移的同时,减缓Flash存储器使用寿命的损耗。具体方案为:从内存中获取数据及第一Flash地址,根据第一Flash地址将数据由内存迁移至Flash存储器,当数据在第一预设时间内的读写次数小于第一阈值时,将数据由Flash存储器迁移至硬盘并在Flash存储器中删除数据,当数据在第二预设时间内的读写次数大于或等于第二阈值时,将数据由硬盘迁移至内存。本发明用于数据存储。

Patent Agency Ranking