-
公开(公告)号:CN112799584A
公开(公告)日:2021-05-14
申请号:CN201911108377.8
申请日:2019-11-13
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种数据存储方法和装置,应用于分布式文件存储系统,分布式文件存储系统中每个磁盘包括多个预设存储空间,每个存储池由多个预设存储空间组成,该方法包括:获取待存储数据;将待存储数据分割为多个可读取的待存储对象;从多个存储池中,选择满足第一有效性条件的存储池,作为待分配存储池;针对每个待存储对象,从待分配存储池中,为该待存储对象分配对应的目标存储池,将该待存储对象存储至目标存储池中。这样,分布式文件存储系统可将任一满足第一有效性条件的存储池作为待存储数据对应的目标存储池,即使各个存储池的损坏的预设存储空间数量均超过存储冗余数据的预设存储空间,也不会中断数据存储,从而减少存储资源浪费。
-
公开(公告)号:CN110515761B
公开(公告)日:2022-06-03
申请号:CN201810496123.7
申请日:2018-05-22
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请实施例提供了一种数据获取方法及装置。所述方法包括:确定待获取数据的地址信息,判断待获取数据的地址信息对应的磁盘是否属于已损坏磁盘,如果不属于,则根据待获取数据的地址信息获取待获取数据,得到当前数据;如果属于,则确定下一待获取数据的地址信息,返回执行判断待获取数据的地址信息对应的磁盘是否属于已损坏磁盘的步骤。应用本申请实施例提供的方案,能够在发生超冗余坏盘时获取到磁盘阵列中的未损坏数据。
-
公开(公告)号:CN110309012B
公开(公告)日:2021-01-26
申请号:CN201810259318.X
申请日:2018-03-27
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请提供一种数据处理方法及其装置,该方法包括:当需要对目标TKG进行数据写入时,判断所述目标TKG是否可用;若可用,则对所述目标TKG进行数据写入;否则,对所述目标TKG进行修复,并对修复后的目标TKG进行数据写入。该方法可以提高业务稳定性。
-
公开(公告)号:CN110309012A
公开(公告)日:2019-10-08
申请号:CN201810259318.X
申请日:2018-03-27
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请提供一种数据处理方法及其装置,该方法包括:当需要对目标TKG进行数据写入时,判断所述目标TKG是否可用;若可用,则对所述目标TKG进行数据写入;否则,对所述目标TKG进行修复,并对修复后的目标TKG进行数据写入。该方法可以提高业务稳定性。
-
公开(公告)号:CN110275669B
公开(公告)日:2022-11-25
申请号:CN201810215280.6
申请日:2018-03-15
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本申请提供了数据存储方法、装置及电子设备。在本申请中,通过对磁盘的存储区域进行业务性能的细分,最终实现了不同业务性能的业务或者同一业务在不同时间段要求的不同业务性能分层存储在存储性能相同的磁盘中,相比于现有不同存储性能的存储介质分层存储不同业务性能的业务,大大降低了数据存储成本。
-
公开(公告)号:CN110515761A
公开(公告)日:2019-11-29
申请号:CN201810496123.7
申请日:2018-05-22
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请实施例提供了一种数据获取方法及装置。所述方法包括:确定待获取数据的地址信息,判断待获取数据的地址信息对应的磁盘是否属于已损坏磁盘,如果不属于,则根据待获取数据的地址信息获取待获取数据,得到当前数据;如果属于,则确定下一待获取数据的地址信息,返回执行判断待获取数据的地址信息对应的磁盘是否属于已损坏磁盘的步骤。应用本申请实施例提供的方案,能够在发生超冗余坏盘时获取到磁盘阵列中的未损坏数据。
-
-
-
公开(公告)号:CN112799584B
公开(公告)日:2023-04-07
申请号:CN201911108377.8
申请日:2019-11-13
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种数据存储方法和装置,应用于分布式文件存储系统,分布式文件存储系统中每个磁盘包括多个预设存储空间,每个存储池由多个预设存储空间组成,该方法包括:获取待存储数据;将待存储数据分割为多个可读取的待存储对象;从多个存储池中,选择满足第一有效性条件的存储池,作为待分配存储池;针对每个待存储对象,从待分配存储池中,为该待存储对象分配对应的目标存储池,将该待存储对象存储至目标存储池中。这样,分布式文件存储系统可将任一满足第一有效性条件的存储池作为待存储数据对应的目标存储池,即使各个存储池的损坏的预设存储空间数量均超过存储冗余数据的预设存储空间,也不会中断数据存储,从而减少存储资源浪费。
-
公开(公告)号:CN110275669A
公开(公告)日:2019-09-24
申请号:CN201810215280.6
申请日:2018-03-15
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本申请提供了数据存储方法、装置及电子设备。在本申请中,通过对磁盘的存储区域进行业务性能的细分,最终实现了不同业务性能的业务或者同一业务在不同时间段要求的不同业务性能分层存储在存储性能相同的磁盘中,相比于现有不同存储性能的存储介质分层存储不同业务性能的业务,大大降低了数据存储成本。
-
-
-
-
-
-
-
-
-