-
公开(公告)号:CN107092437A
公开(公告)日:2017-08-25
申请号:CN201610088973.4
申请日:2016-02-17
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种数据写入、读取方法及装置、云存储系统,所述数据写入方法包括:接入节点接收数据写入请求;当无法获取到可用管理节点时,识别所述数据写入请求中包含的域标识信息,并根据所述域标识信息,查询预先保存的索引,其中,所述索引包含资源池与域标识信息的对应关系;识别与所述域标识信息匹配的目标资源池,其中,每个资源池中包含至少一个存储服务器;从所述目标资源池中包含的至少一个存储服务器中,确定其中一个存储服务器为目标存储服务器,并将待写入数据写入所述目标存储服务器。本实施方式能够保证在全部管理节点出现故障或管理节点集群网络异常时,云存储系统仍能正常运行,且不需要增加额外的成本。
-
公开(公告)号:CN107015884A
公开(公告)日:2017-08-04
申请号:CN201610060392.X
申请日:2016-01-28
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例公开了一种数据存储方法及装置,方法包括:存储服务器接收并存储第一存储节点发送的目标数据的实际存储地址和备份数目N;根据备份数目N,确定除第一存储节点以外的其他N个待接收备份数据的存储节点;将所确定的N个存储节点的标识信息发送给第一存储节点;接收所确定的N个存储节点中每个存储节点发送的各自存储备份数据的实际存储地址;根据接收到的第一存储节点发送的目标数据的实际存储地址和所确定的N个存储节点中每个存储节点发送的备份数据的实际存储地址,建立并存储各个实际存储地址的关联关系。当第一存储节点出现故障时,存储服务器根据存储的各个实际存储地址间的关联关系,使用户能够访问其他存储节点中的备份数据。
-
公开(公告)号:CN106850710A
公开(公告)日:2017-06-13
申请号:CN201510883969.2
申请日:2015-12-03
Applicant: 杭州海康威视数字技术股份有限公司
IPC: H04L29/08
Abstract: 本发明实施例提供的一种数据云存储系统、客户终端、存储服务器及应用方法,该数据存储方法包括:向调度管理服务中心发送存储服务器查询请求;调度管理服务中心正常运行时,接收并缓存第一地址信息,异常运行时从缓存的第一地址信息中选择第一地址信息;向其对应的存储服务器发送资源请求;使得该存储服务器为目标数据分配存储单元,生成存储资源信息;继续向该存储服务器发送数据存储请求,使得存储服务器根据目标数据的属性信息,生成数据索引信息,将目标数据存储到为其分配的存储单元中。应用本发明实施例,能够在调度管理服务中心出现故障时保障其能够继续进行数据存储、查询和下载,降低了数据云存储系统对调度管理服务中心故障的敏感程度。
-
公开(公告)号:CN109144766B
公开(公告)日:2023-05-02
申请号:CN201710512246.0
申请日:2017-06-28
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F11/10
Abstract: 本发明实施例提供了一种数据存储、重构方法和装置、及电子设备,所述数据存储方法包括:当接收到针对目标数据的存储指令时,基于预设的第一比例,确定所述目标数据所对应的纠删码策略,其中,所述纠删码策略包括第一纠删码策略和/或第二纠删码策略,所述第一纠删码策略的安全级别高于所述第二纠删码策略,所述第一比例为:第一纠删码策略的使用次数占纠删码策略使用总次数的比例;基于所确定的纠删码策略,对所述目标数据进行切片和冗余处理,得到所述目标数据对应的多个数据片段;将所述多个数据片段分别存储于不同存储设备的存储对象中。应用本发明实施例,可以有效地提高重构效率。
-
公开(公告)号:CN109120885B
公开(公告)日:2021-01-05
申请号:CN201710495206.X
申请日:2017-06-26
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F16/71 , H04N7/18 , H04N21/231 , H04N5/93 , H04N21/845
Abstract: 本发明公开了一种视频数据获取方法、装置及系统,应用于云存储系统中,所述方法包括:接收终端发送的第一获取请求,所述第一获取请求包括目标时间段;从分布式存储的至少两个索引数据块中,查询出所述目标时间段对应的视频数据的索引数据,所述索引数据存储有所述视频数据中的至少一个视频帧的索引;向所述终端发送所述索引数据;接收所述终端发送的第二获取请求,所述第二获取请求包括所述索引数据;从分布式存储的至少两个视频数据块中,查询出与所述索引数据对应的视频数据;向所述终端发送所述视频数据。
-
公开(公告)号:CN107656695B
公开(公告)日:2020-12-25
申请号:CN201610586825.5
申请日:2016-07-25
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本发明提供了一种数据存储、删除方法、装置及分布式存储系统,该方法中,接收待存储的目标数据及对应的网络地址信息,生成目标数据对应的标识信息及标识信息与网络地址信息的第一对应关系,将目标数据及标识信息发送给网络地址信息对应的存储服务器,使其存储目标数据,将标识信息与保存位置信息的第二对应关系发送给网关服务器;如果在预设时间段内未接收到第二对应关系,将第一对应关系作为数据存储信息发送至元数据服务器。本发明中,通过在未接收到第二对应关系时,将第一对应关系作为数据存储信息发送至元数据服务器的方式,使元数据服务器确定目标数据在存储服务器中的保存位置信息未被传输。
-
公开(公告)号:CN108509143B
公开(公告)日:2020-11-06
申请号:CN201710100791.9
申请日:2017-02-23
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种基于云存储的数据检测方法及装置,该方法包括:获得管理节点对应待检测存储节点存储的第一最新日志信息的特征信息,管理节点中存储有至少一个存储节点对应的日志信息,日志信息为每一存储节点执行每次数据写操作时生成并存储的信息;获得待检测存储节点存储的第二最新日志信息的特征信息;对比第一最新日志信息的特征信息与第二最新日志信息的特征信息;当对比结果表征第一最新日志信息比第二最新日志信息新时,确定待检测存储节点存储的数据中包含异常数据。以实现云存储系统中对出现异常的数据的检测。
-
公开(公告)号:CN108073355B
公开(公告)日:2020-03-17
申请号:CN201611032369.6
申请日:2016-11-15
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本发明实施例提供了一种数据存储和删除方法及装置,数据删除方法包括:获得客户端发送的携带待删除数据的第一标识信息的数据删除指令,在存储的对应关系中,查找包含第一标识信息的第一对应关系;当查找到第一对应关系后,判断第一标识信息是否对应目标数据内容;若是,将第一标识信息设置为已删除状态,通知客户端所述待删除数据已删除;若否,删除包含第一标识信息的第一对应关系,通知客户端所述待删除数据已删除。应用本发明实施例在获得数据内容与已存储数据的目标数据内容相同的待存储数据的探测请求时,不在重复存储数据内容,而是存储待存储数据与相应的已存储数据的对应关系,以节省本地的存储空间,并且,节省删除数据时所消耗的时间。
-
公开(公告)号:CN107888636B
公开(公告)日:2020-01-17
申请号:CN201610872653.8
申请日:2016-09-30
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明公开了一种基于云存储的数据处理方法及系统。其中,该方法包括:互联云装置接收客户端通过工作云装置发送的数据查询请求,其中,数据查询请求用于请求查询已经存储在云域中的媒体数据,工作云装置为IP摄像机的默认存储云域;互联云装置根据数据查询请求查询是否在备份云装置中存储IP摄像机采集的媒体数据;若互联云装置根据数据查询请求查询到在备份云装置中存储IP摄像机的媒体数据,则向工作云装置推送媒体数据的地址,其中,媒体数据的地址用于指示客户端向备份云装置请求查询媒体数据。本发明解决了相关技术中多云域间数据存储灵活性较差的技术问题。
-
公开(公告)号:CN107229414B
公开(公告)日:2020-01-17
申请号:CN201610175965.3
申请日:2016-03-24
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本发明实施例提供了存储空间回收方法及装置。其中,该方法包括:在满足预定空间回收条件时,确定具有待回收标识的目标数据块,待回收标识为:对具有满块标识且空间利用率低于预定利用率阈值的数据块所设置的标识;生成占用段链表和空闲段链表,空闲段链表包括:具有删除标识的数据段所对应的段标识,占用段链表包括:满足预定占用条件的数据段所对应的段标识,预定占用条件为:未具有删除标识且段起始偏移大于空闲段链表所涵盖数据段的段起始偏移中的最小值;基于空闲段链表和占用段链表,对目标数据块执行块内数据迁移;将块内数据迁移完毕的目标数据块更新为空间回收完成的数据块。通过方案,可以降低数据的移动量较大且提高存储资源利用率。
-
-
-
-
-
-
-
-
-