-
-
公开(公告)号:CN106293543B
公开(公告)日:2019-03-12
申请号:CN201610726634.4
申请日:2016-08-25
Applicant: 中国科学院计算技术研究所
IPC: G06F3/06
Abstract: 本发明提出一种基于捎带回收的瓦记录RAID写顺序化方法及装置,计算机存储领域,该装置包括结构管理模块,用于将带通过循环日志的结构进行管理;高速持久缓存模块,用于接收所有非顺序写请求,当高速持久缓存被写到水位时触发下刷,其中将带划分为数据带与校验带,下刷以组为单位进行,组之间的写入未产生写覆盖,组内非整条带的写过程触发小写过程,同时在小写读时做捎带回收操作。本发明中当所有小写读都完成后再开始小写写,在带内小写读的过程中捎带做回收读,在小写写过程中将回收读出的有效数据和要下刷的有效数据合并为大块的顺序写,避免带内小写产生的RMW过程,并提升系统的整体性能。
-
公开(公告)号:CN118259838A
公开(公告)日:2024-06-28
申请号:CN202410480262.6
申请日:2024-04-19
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提出一种多租户共享分布式存储系统性能资源的分配方法及系统,该方法包含依据底层存储设备不同的使用量与对应的租户负载访问模式,对该底层存储设备进行离线性能建模,构建关于底层存储设备VIOPS与尾延迟的离线性能模型;利用所述离线性能模型,在线调控该底层存储设备可提供的VIOPS,得到一VIOPS目标值;将所述VIOPS目标值至少一部分分配给该至少一LC租户,将其余部分分配给该至少一BE租户。该方法能够显著提升多租户共享场景下,底层存储设备的资源利用率。
-
公开(公告)号:CN104731526A
公开(公告)日:2015-06-24
申请号:CN201510115467.5
申请日:2015-03-17
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
IPC: G06F3/06
Abstract: 本发明提供一种不满条带写的方法及装置,其中所述条带由镜像条带、纠删码条带和空条带这三个逻辑条带组成,所述方法包括:将数据写入镜像条带,以及修改所述条带对应的位图中的镜像位图指示位和镜像位图;其中,镜像位图指示位用于指示镜像位图中存放的是镜像条带数据信息还是指向镜像条带数据信息的地址,镜像条带数据信息用于指示镜像条带上的哪些位置有数据。本发明使不满条带写请求可以被高效地处理,并且降低了元数据的开销。
-
-
公开(公告)号:CN104731527B
公开(公告)日:2018-09-07
申请号:CN201510115469.4
申请日:2015-03-17
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
IPC: G06F3/06
Abstract: 本发明提供一种三条带状态转换方法,包括:更改三条带状态,其中三条带状态用于指示当前的逻辑条带及其位置关系;以及使纠删码位图指示更改后的纠删码条带位置和镜像条带位置上的哪些数据块构成纠删码条带。本发明降低了数据迁移导致的系统开销,提升了三条带系统的性能。
-
公开(公告)号:CN103944958A
公开(公告)日:2014-07-23
申请号:CN201410095627.X
申请日:2014-03-14
Applicant: 中国科学院计算技术研究所 , 天津中科蓝鲸信息技术有限公司
Abstract: 本发明公开了一种广域文件系统及实现方法,涉及文件系统技术领域,是在广域上适用的文件系统的一种实现方法。该系统包括:通过事件驱动模块接收操作请求,则根据所请求文件的节点号,通过缓存管理模块查询本地缓存中是否存在该文件,若存在,则从缓存中访问该文件,若不存在,则根据该节点号通过节点管理模块查询该文件在服务器端数据库中的路径名,并根据操作请求信息通过事件处理模块获得该文件和该文件元信息,将该文件和该文件元信息发送到缓存管理模块,缓存管理模块将该文件和该文件的元信息存入本地缓存。本发明不依赖于底层文件系统,仅要求底层文件系统可共享即可,并提供缓存的空间管理功能,提高了系统的资源利用率。
-
公开(公告)号:CN111444012A
公开(公告)日:2020-07-24
申请号:CN202010139287.1
申请日:2020-03-03
Applicant: 中国科学院计算技术研究所
IPC: G06F9/50
Abstract: 本发明提出一种保证延迟敏感应用延迟SLO的动态调控资源方法及系统。在分布式存储系统的服务节点中创建多个请求队列,不同类型的请求位于不同的队列,根据该服务节点的逻辑线程资源和目标尾延迟需求,为请求队列分配线程组并实时动态调控线程资源,且各请求队列的线程组与的物理CPU资源相绑定;客户端发送应用访问请求至该服务节点,该服务节点根据该应用访问请求的类型,将该应用访问请求存入与其类型相对应的请求队列作为当前队列,并使用为该当前队列分配的线程组处理该应用访问请求,将处理结果发送给该客户端。本发明能够保证延迟敏感型应用的尾延迟满足目标需求,同时还能够使得批处理类应用的带宽维持在较高水平。
-
公开(公告)号:CN106970764B
公开(公告)日:2019-08-16
申请号:CN201710102277.9
申请日:2017-02-24
Applicant: 中国科学院计算技术研究所
IPC: G06F3/06
Abstract: 本发明提出一种基于条带版本的瓦记录RAID写顺序化方法及系统,涉及计算机存储技术领域,该方法包括设置高速持久缓存,用于接收所有非顺序写请求,当所述高速持久缓存被写到水位时触发下刷,其中以组为单位进行下刷,下刷时为要写入组中的各条带生成新版本;对于条带的每一个版本,计算一次校验,并将条带数据与校验顺序的写入带内。本发明避免了传统RAID5/6小写产生的RMW过程和瓦记录磁盘的RMW过程,提升了系统的整体性能。
-
公开(公告)号:CN108376053A
公开(公告)日:2018-08-07
申请号:CN201810065182.9
申请日:2018-01-23
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提出一种支持原地更新的瓦记录写顺序化方法及装置,涉及计算机存储领域,该方法包括瓦记录磁盘中的带划分为随机带、半随机带、顺序带;初始时瓦记录磁盘中的带由随机带与顺序带组成,如果应用以非顺序写为主,则随机带的比例高于顺序带的比例,如果应用以顺序写为主,则顺序带的比例高于随机带的比例,当随机带中的可写磁道被写满时,将写满的随机带转换为半随机带,以增加带内可写入空间;当半随机带中的可写磁道被写满时,将被写满的半随机带转换为顺序带。本发明将瓦记录磁盘的带划分为三种类型,将随机写顺序化,并且支持原地更新,从而避免了瓦记录整带的RMW过程,一定程度上提升了瓦记录磁盘非顺序写性能。
-
-
-
-
-
-
-
-
-