-
公开(公告)号:CN110515761B
公开(公告)日:2022-06-03
申请号:CN201810496123.7
申请日:2018-05-22
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请实施例提供了一种数据获取方法及装置。所述方法包括:确定待获取数据的地址信息,判断待获取数据的地址信息对应的磁盘是否属于已损坏磁盘,如果不属于,则根据待获取数据的地址信息获取待获取数据,得到当前数据;如果属于,则确定下一待获取数据的地址信息,返回执行判断待获取数据的地址信息对应的磁盘是否属于已损坏磁盘的步骤。应用本申请实施例提供的方案,能够在发生超冗余坏盘时获取到磁盘阵列中的未损坏数据。
-
公开(公告)号:CN111522501B
公开(公告)日:2022-01-21
申请号:CN201910105236.4
申请日:2019-02-01
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本申请实施例提供了磁盘阵列空间划分方法、装置、电子设备及存储介质,该方法包括:在满足预设存储空间增加规则时,确定需要增加的目标条带;获取磁盘阵列中各条带的属性信息;按照各条带的属性信息及构建目标条带所需的块数,确定需要释放的目标块;释放目标块,并利用目标块组成目标条带。本申请实施例的磁盘阵列空间划分方法,可以方便灵活的根据视频应用的需求、存储磁盘的状态变化,调整条带的冗余度和阵列的空间转化,满足条带数的增扩,可以提高磁盘阵列中的存储空间的调整效率。拆分旧的空间,组建新的具有冗余的存储空间,满足在有磁盘损坏的情况下,依旧可以提供具有冗余的图像数据存储空间。
-
公开(公告)号:CN112882659A
公开(公告)日:2021-06-01
申请号:CN202110220826.9
申请日:2021-02-26
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本申请实施例提供了一种信息获得方法、装置、电子设备及存储介质,涉及计算机技术领域,包括:获得目标存储区域的写指针的偏移信息,其中,所述目标存储区域为:磁盘中用于按照数据存储顺序连续存储数据的区域,所获得的偏移信息与参考偏移信息一致,所述参考偏移信息为:所述磁盘的固件信息中记录的、所述目标存储区域的写指针的偏移信息,所述偏移信息表征:所述目标存储区域的写指针所指示的用于写入待写入数据的位置、相对该目标存储区域的初始写入位置的偏移;根据所获得的写指针的偏移信息,获得所述磁盘中目标存储区域的磁盘信息。由此可见,应用本申请实施例提供的信息获得方案,可以减小磁盘额外的存储开销。
-
公开(公告)号:CN112650441A
公开(公告)日:2021-04-13
申请号:CN201910965240.8
申请日:2019-10-11
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本申请实施例提供了一种条带缓存分配方法及装置,该方法包括:当在待分配RAID中对待处理数据进行读写操作时,确定待处理数据的目标数据量,其中,待分配RAID为系统中的任一RAID;基于目标数据量及预先建立的条带缓存池中各条带缓存的粒度,确定待分配RAID所需的条带缓存的待分配数量;从预先建立的条带缓存池中选取待分配数量的条带缓存,分配给待分配RAID。所分配的条带缓存是根据待处理数据的数据量来确定的,因此在待分配RAID中有多少待处理数据需要处理,则分配相应数量的条带缓存,减少了条带缓存资源的浪费,同时提升RAID的性能。
-
公开(公告)号:CN110309012B
公开(公告)日:2021-01-26
申请号:CN201810259318.X
申请日:2018-03-27
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请提供一种数据处理方法及其装置,该方法包括:当需要对目标TKG进行数据写入时,判断所述目标TKG是否可用;若可用,则对所述目标TKG进行数据写入;否则,对所述目标TKG进行修复,并对修复后的目标TKG进行数据写入。该方法可以提高业务稳定性。
-
公开(公告)号:CN110515536B
公开(公告)日:2020-10-27
申请号:CN201810496767.6
申请日:2018-05-22
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本发明实施例提供了一种数据存储系统,该系统包括:多个计算节点、SAS交换机及存储节点,计算节点、SAS交换机及存储节点间基于SAS进行通信;计算节点与SAS交换机连接,SAS交换机与存储节点连接;计算节点:用于若该计算节点针对待访问的目标硬盘的操作状态为非允许操作状态,通过SAS交换机向目标硬盘所在的存储节点发送访问请求;存储节点:用于若目标硬盘的并发访问数量小于预设并发阈值,允许发送访问请求的计算节点访问目标硬盘。本发明实施例的数据存储系统,可以实现多个计算节点同时访问一个硬盘,能够提高计算节点的工作效率,从而提高数据存储系统整体运行效率。
-
公开(公告)号:CN110309012A
公开(公告)日:2019-10-08
申请号:CN201810259318.X
申请日:2018-03-27
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请提供一种数据处理方法及其装置,该方法包括:当需要对目标TKG进行数据写入时,判断所述目标TKG是否可用;若可用,则对所述目标TKG进行数据写入;否则,对所述目标TKG进行修复,并对修复后的目标TKG进行数据写入。该方法可以提高业务稳定性。
-
公开(公告)号:CN112650441B
公开(公告)日:2022-11-04
申请号:CN201910965240.8
申请日:2019-10-11
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本申请实施例提供了一种条带缓存分配方法及装置,该方法包括:当在待分配RAID中对待处理数据进行读写操作时,确定待处理数据的目标数据量,其中,待分配RAID为系统中的任一RAID;基于目标数据量及预先建立的条带缓存池中各条带缓存的粒度,确定待分配RAID所需的条带缓存的待分配数量;从预先建立的条带缓存池中选取待分配数量的条带缓存,分配给待分配RAID。所分配的条带缓存是根据待处理数据的数据量来确定的,因此在待分配RAID中有多少待处理数据需要处理,则分配相应数量的条带缓存,减少了条带缓存资源的浪费,同时提升RAID的性能。
-
公开(公告)号:CN113391757A
公开(公告)日:2021-09-14
申请号:CN202010171580.6
申请日:2020-03-12
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本发明实施例提供了一种节点扩展方法、装置及迁入节点。其中,方法包括:切换至禁止数据重构状态,处于所述禁止数据重构状态的节点拒绝执行数据重构操作;当其他节点的物理磁盘被迁移至所述迁入节点时,确定所述物理磁盘在所述其他节点中所属安全域,作为目标安全域,所述其他节点预先处于所述禁止数据重构状态;将所述物理磁盘加入目标安全域,并启动与所述物理磁盘对应的服务管理所述物理磁盘;在确定磁盘迁移结束后,终止所述禁止数据重构状态。可以通过物理磁盘迁移的方式,在无需数据迁移的情况下,实现节点扩展,并且通过限制节点的数据重构,避免不必要的数据重构,以实现快速节点扩展,从而有效降低数据压力。
-
公开(公告)号:CN112799584A
公开(公告)日:2021-05-14
申请号:CN201911108377.8
申请日:2019-11-13
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种数据存储方法和装置,应用于分布式文件存储系统,分布式文件存储系统中每个磁盘包括多个预设存储空间,每个存储池由多个预设存储空间组成,该方法包括:获取待存储数据;将待存储数据分割为多个可读取的待存储对象;从多个存储池中,选择满足第一有效性条件的存储池,作为待分配存储池;针对每个待存储对象,从待分配存储池中,为该待存储对象分配对应的目标存储池,将该待存储对象存储至目标存储池中。这样,分布式文件存储系统可将任一满足第一有效性条件的存储池作为待存储数据对应的目标存储池,即使各个存储池的损坏的预设存储空间数量均超过存储冗余数据的预设存储空间,也不会中断数据存储,从而减少存储资源浪费。
-
-
-
-
-
-
-
-
-