-
公开(公告)号:CN104731526A
公开(公告)日:2015-06-24
申请号:CN201510115467.5
申请日:2015-03-17
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
IPC: G06F3/06
Abstract: 本发明提供一种不满条带写的方法及装置,其中所述条带由镜像条带、纠删码条带和空条带这三个逻辑条带组成,所述方法包括:将数据写入镜像条带,以及修改所述条带对应的位图中的镜像位图指示位和镜像位图;其中,镜像位图指示位用于指示镜像位图中存放的是镜像条带数据信息还是指向镜像条带数据信息的地址,镜像条带数据信息用于指示镜像条带上的哪些位置有数据。本发明使不满条带写请求可以被高效地处理,并且降低了元数据的开销。
-
公开(公告)号:CN102073739A
公开(公告)日:2011-05-25
申请号:CN201110026999.3
申请日:2011-01-25
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
Abstract: 本发明提供一种带有快照功能的分布式文件系统中的数据写方法,包括:分布式文件系统中的一客户端要完成对一文件的写操作,向该分布式文件系统的服务器端请求与该操作有关的布局;所述服务器端查询元数据,得到所述文件的映射关系,并在所述分布式文件系统的存储设备中为所述文件预留存储空间,生成与所述操作有关的布局;所述客户端根据所述布局在所述存储设备上实现对所述文件的写操作,并将所述写操作的数据写入所述预留的存储空间;所述客户端完成所述写操作后,由所述服务器端实现对与所述文件有关的元数据的修改。本发明的方法使得对分布式文件系统的读写具有可靠性,且为创建快照创造了方便。
-
公开(公告)号:CN100440888C
公开(公告)日:2008-12-03
申请号:CN200410000826.4
申请日:2004-01-17
Applicant: 中国科学院计算技术研究所
IPC: H04L29/06
Abstract: 一种基于网络存储和资源虚拟化的大型服务系统的管理系统及其方法包括用户虚拟化管理服务模块,系统虚拟化管理服务模块和原子部件,所述原子部件包括物理计算节点和物理存储设备节点;所述系统虚拟化管理服务模块用于实现系统虚拟化服务和管理封装,对所述原子部件进行资源虚拟化,为上一级系统虚拟化管理服务模块和所述用户虚拟化管理服务模块提供公共接口;所述系统虚拟化管理服务模块向上级系统虚拟化管理服务模块和用户虚拟化管理服务模块提供虚拟资源。本发明以存储管理为基础,采取层次结构,将服务器及各种典型服务系统的管理,及用户自定义系统的管理有效集成,使管理系统的研发更为简单易行,并有很强的可扩展性,总体提高了系统的性能。
-
公开(公告)号:CN106970764B
公开(公告)日:2019-08-16
申请号:CN201710102277.9
申请日:2017-02-24
Applicant: 中国科学院计算技术研究所
IPC: G06F3/06
Abstract: 本发明提出一种基于条带版本的瓦记录RAID写顺序化方法及系统,涉及计算机存储技术领域,该方法包括设置高速持久缓存,用于接收所有非顺序写请求,当所述高速持久缓存被写到水位时触发下刷,其中以组为单位进行下刷,下刷时为要写入组中的各条带生成新版本;对于条带的每一个版本,计算一次校验,并将条带数据与校验顺序的写入带内。本发明避免了传统RAID5/6小写产生的RMW过程和瓦记录磁盘的RMW过程,提升了系统的整体性能。
-
公开(公告)号:CN106227464B
公开(公告)日:2019-03-15
申请号:CN201610557291.3
申请日:2016-07-14
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
Abstract: 本发明公开了一种双层冗余存储系统及其数据写入、读取及恢复方法,该双层冗余存储系统包括冗余组,该冗余组包括至少两个数据节点、主校验节点和从校验节点,每个数据节点包括第一缓存、第一存储单元及第二存储单元,主校验节点包括第二缓存、第一RAID6处理单元及主校验存储单元,从校验节点包括第三缓存、第二RAID6处理单元及从校验存储单元,该写入方法包括:该冗余组接收来自一客户端的写请求数据,该数据节点、该主、从校验节点分别对该写请求数据进行缓存;该主校验节点对其缓存的写请求数据进行RAID6计算以获得第一校验数据与第二校验数据,该数据节点对该写请求数据进行存储;该主、从校验节点分别对其缓存的数据进行删除。
-
公开(公告)号:CN108376053A
公开(公告)日:2018-08-07
申请号:CN201810065182.9
申请日:2018-01-23
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提出一种支持原地更新的瓦记录写顺序化方法及装置,涉及计算机存储领域,该方法包括瓦记录磁盘中的带划分为随机带、半随机带、顺序带;初始时瓦记录磁盘中的带由随机带与顺序带组成,如果应用以非顺序写为主,则随机带的比例高于顺序带的比例,如果应用以顺序写为主,则顺序带的比例高于随机带的比例,当随机带中的可写磁道被写满时,将写满的随机带转换为半随机带,以增加带内可写入空间;当半随机带中的可写磁道被写满时,将被写满的半随机带转换为顺序带。本发明将瓦记录磁盘的带划分为三种类型,将随机写顺序化,并且支持原地更新,从而避免了瓦记录整带的RMW过程,一定程度上提升了瓦记录磁盘非顺序写性能。
-
公开(公告)号:CN104731526B
公开(公告)日:2017-11-03
申请号:CN201510115467.5
申请日:2015-03-17
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
IPC: G06F3/06
Abstract: 本发明提供一种不满条带写的方法及装置,其中所述条带由镜像条带、纠删码条带和空条带这三个逻辑条带组成,所述方法包括:将数据写入镜像条带,以及修改所述条带对应的位图中的镜像位图指示位和镜像位图;其中,镜像位图指示位用于指示镜像位图中存放的是镜像条带数据信息还是指向镜像条带数据信息的地址,镜像条带数据信息用于指示镜像条带上的哪些位置有数据。本发明使不满条带写请求可以被高效地处理,并且降低了元数据的开销。
-
公开(公告)号:CN106681848A
公开(公告)日:2017-05-17
申请号:CN201611147298.4
申请日:2016-12-13
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提出一种纠删码RAID的数据一致性保障方法及系统,涉及计算机存储领域,该方法包括步骤1,当有新数据写入时,修改版本设备中各设备的数据映射表,并生成事务日志表,所述版本设备中各设备进行异步下刷操作,完成后,清除所述事务日志表,其中所述版本设备由新数据卷与旧数据卷构成;步骤2,将所述新数据及与其相对应的新校验信息经所述版本设备转发并写入新数据卷,当所述新数据与所述新校验信息都完整写入后,再触发所述步骤1,将所述新数据与所述新校验信息写入所述旧数据卷。本发明高效的保证纠删码RAID系统数据的一致性。
-
公开(公告)号:CN106293543A
公开(公告)日:2017-01-04
申请号:CN201610726634.4
申请日:2016-08-25
Applicant: 中国科学院计算技术研究所
IPC: G06F3/06
CPC classification number: G06F3/061 , G06F3/064 , G06F3/0689
Abstract: 本发明提出一种基于捎带回收的瓦记录RAID写顺序化方法及装置,计算机存储领域,该装置包括结构管理模块,用于将带通过循环日志的结构进行管理;高速持久缓存模块,用于接收所有非顺序写请求,当高速持久缓存被写到水位时触发下刷,其中将带划分为数据带与校验带,下刷以组为单位进行,组之间的写入未产生写覆盖,组内非整条带的写过程触发小写过程,同时在小写读时做捎带回收操作。本发明中当所有小写读都完成后再开始小写写,在带内小写读的过程中捎带做回收读,在小写写过程中将回收读出的有效数据和要下刷的有效数据合并为大块的顺序写,避免带内小写产生的RMW过程,并提升系统的整体性能。
-
公开(公告)号:CN102790797B
公开(公告)日:2015-05-06
申请号:CN201210160339.9
申请日:2012-05-22
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
IPC: H04L29/08 , H04L29/06 , H04L12/925
Abstract: 本发明公开一种机群文件系统客户端存储资源延迟分配方法和系统,该方法包括:步骤1,客户端根据文件布局操作情况,进行存储资源延迟分配;步骤2,在文件删除时对存储资源回收,处理客户端延迟分配的存储资源回收;步骤3,对存储资源在客户端与元数据服务器之间的一致性进行维护。
-
-
-
-
-
-
-
-
-