-
公开(公告)号:CN107301177A
公开(公告)日:2017-10-27
申请号:CN201610230618.6
申请日:2016-04-14
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F17/30
Abstract: 本发明实施例公开了一种文件存储方法及装置,该方法包括:接收针对待存储文件的存储请求,获得待存储文件的第一文件标识和待存储文件的数据量,并确定用于存储待存储文件的目标键,根据目标键,获得待存储文件按照预设的存储格式存储时的待存储元数据,按照预设的存储格式,将第一文件标识、数据量和待存储文件存储至目标键的值中,并将待存储元数据存储至预设的元数据库中。应用本发明实施例,有效地保证了元数据的恢复,进而避免了文件的损失。
-
公开(公告)号:CN109002253B
公开(公告)日:2021-06-04
申请号:CN201710419968.1
申请日:2017-06-06
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请实施例提供了一种损坏条带的处理方法及装置,方法包括:元数据服务器将损坏条带的条带信息发送给存储服务器,损坏条带的条带信息包括正常块的标识和异常块的标识,异常块的标识对应的数据块为坏块;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块重新进行EC计算,获得预设个数目标校验块的校验数据,预设个数为一条带中包括的校验块的个数,根据正常块的标识和异常块的标识对应的数据块以及目标校验块,构建与损坏条带的标识相同的新正常条带。应用本申请实施例,使得损坏条带对应的正常数据块再损坏时,该再损坏的正常数据块中存储的流式数据能够被修复和读取。
-
公开(公告)号:CN106610967B
公开(公告)日:2020-06-12
申请号:CN201510688290.8
申请日:2015-10-21
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供的对NAS设备中视频数据的读写方法及装置,将NAS设备挂载在存储服务器的块接口上,NAS设备中包括有多个数据文件,索引服务器中存储有NAS设备中的数据文件的文件名与块设备的磁盘块号的对应关系,本发明接收客户端设备发送的读请求或写请求,确定所需读取数据或写入数据的数据文件的文件名,进而在NAS设备中所确定的文件名对应的数据文件中进行读写。本发明将对块设备的读写操作转换为对NAS设备中数据文件的读写操作,因此使得视频云存储系统支持了NAS设备。
-
公开(公告)号:CN107562368B
公开(公告)日:2019-11-22
申请号:CN201610532517.4
申请日:2016-06-30
Applicant: 杭州海康威视数字技术股份有限公司
Inventor: 曹力
Abstract: 本发明实施例公开了一种数据处理方法及装置,应用于元数据服务器,该方法包括:接收存储服务器发送的第一通知消息,其中,第一通知消息中包括存储服务器中的第一网络硬盘的第一标识,第一网络硬盘为丢失的网络硬盘;根据预先存储的网络硬盘的标识与条带的标识之间的第一对应关系,获得与第一标识对应的第一条带的标识;获得第一条带中与第一网络硬盘对应的第一存储单元的标识;判断第一存储单元的存储状态是否为删除状态;若为是,拒绝重构第一存储单元中存储的对象数据;若为否,将第一存储单元的标识发送至存储服务器,存储服务器重构第一存储单元中的对象数据。应用本发明实施例,提高了数据重构的速度。
-
公开(公告)号:CN107562569A
公开(公告)日:2018-01-09
申请号:CN201610533490.0
申请日:2016-06-30
Applicant: 杭州海康威视数字技术股份有限公司
Inventor: 曹力
IPC: G06F11/14
Abstract: 本发明实施例公开了一种数据重构方法及装置,应用于元数据服务器,该方法包括:当第一网络硬盘丢失时,接收存储服务器发送的第一通知消息,其中,第一通知消息中包括第一网络硬盘的第一标识;根据预先存储的网络硬盘的标识与对象数据的标识之间的第一对应关系,获得与第一标识对应的第一对象数据的第二标识,其中,第一对象数据存储于第一网络硬盘中;根据第二标识,获得与第一对象数据对应的第一存储单元的标识,其中,第一存储单元在第一网络硬盘中;将第一存储单元的标识发送至存储服务器,以使存储服务器重构第一存储单元中的第一对象数据。应用本发明实施例,保证了快速地获得完整的对象数据。
-
公开(公告)号:CN107562368A
公开(公告)日:2018-01-09
申请号:CN201610532517.4
申请日:2016-06-30
Applicant: 杭州海康威视数字技术股份有限公司
Inventor: 曹力
Abstract: 本发明实施例公开了一种数据处理方法及装置,应用于元数据服务器,该方法包括:接收存储服务器发送的第一通知消息,其中,第一通知消息中包括存储服务器中的第一网络硬盘的第一标识,第一网络硬盘为丢失的网络硬盘;根据预先存储的网络硬盘的标识与条带的标识之间的第一对应关系,获得与第一标识对应的第一条带的标识;获得第一条带中与第一网络硬盘对应的第一存储单元的标识;判断第一存储单元的存储状态是否为删除状态;若为是,拒绝重构第一存储单元中存储的对象数据;若为否,将第一存储单元的标识发送至存储服务器,存储服务器重构第一存储单元中的对象数据。应用本发明实施例,提高了数据重构的速度。
-
公开(公告)号:CN107463333A
公开(公告)日:2017-12-12
申请号:CN201610392634.5
申请日:2016-06-03
Applicant: 杭州海康威视数字技术股份有限公司
Inventor: 曹力
IPC: G06F3/06
Abstract: 本发明公开了一种网络硬盘空间的回收方法、装置和系统。其中,该方法包括:数据服务器接收空间回收请求,其中,空间回收请求,用于指示回收待回收数据所属的存储空间;数据服务器查询待回收数据对应的预设存储列表组,得到待回收数据所属的存储条带组;数据服务器依据存储条带组中的未回收数据对存储条带组中的存储条带进行分组,得到未回收数据所属的存储条带;数据服务器依据存储条带生成空间回收指令,并发送空间回收指令;数据服务器接收空间回收响应信息。本发明解决了由于相关技术中仅提供了对垃圾数据块进行数据擦除操作,而没有提出对数据搬移过程中如何提升数据存储管理效率的技术问题。
-
公开(公告)号:CN106610967A
公开(公告)日:2017-05-03
申请号:CN201510688290.8
申请日:2015-10-21
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F17/30
Abstract: 本发明实施例提供的对NAS设备中视频数据的读写方法及装置,将NAS设备挂载在存储服务器的块接口上,NAS设备中包括有多个数据文件,索引服务器中存储有NAS设备中的数据文件的文件名与块设备的磁盘块号的对应关系,本发明接收客户端设备发送的读请求或写请求,确定所需读取数据或写入数据的数据文件的文件名,进而在NAS设备中所确定的文件名对应的数据文件中进行读写。本发明将对块设备的读写操作转换为对NAS设备中数据文件的读写操作,因此使得视频云存储系统支持了NAS设备。
-
公开(公告)号:CN107562569B
公开(公告)日:2020-09-25
申请号:CN201610533490.0
申请日:2016-06-30
Applicant: 杭州海康威视数字技术股份有限公司
Inventor: 曹力
IPC: G06F11/14
Abstract: 本发明实施例公开了一种数据重构方法及装置,应用于元数据服务器,该方法包括:当第一网络硬盘丢失时,接收存储服务器发送的第一通知消息,其中,第一通知消息中包括第一网络硬盘的第一标识;根据预先存储的网络硬盘的标识与对象数据的标识之间的第一对应关系,获得与第一标识对应的第一对象数据的第二标识,其中,第一对象数据存储于第一网络硬盘中;根据第二标识,获得与第一对象数据对应的第一存储单元的标识,其中,第一存储单元在第一网络硬盘中;将第一存储单元的标识发送至存储服务器,以使存储服务器重构第一存储单元中的第一对象数据。应用本发明实施例,保证了快速地获得完整的对象数据。
-
公开(公告)号:CN108614670B
公开(公告)日:2020-07-03
申请号:CN201611143547.2
申请日:2016-12-13
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06F3/06
Abstract: 本发明实施例提供了一种信息处理方法及装置,应用于存储服务器,该方法包括:从元数据服务器中获取至少一条损坏条带的第一条带信息,第一条带信息包括:正常块的标识和正常块中存储的流式数据所属的流式对象数据;按照正常块中存储的流式数据所属的流式对象数据,对正常块的标识对应的正常块进行分组;构建针对每组数据块的至少一条新正常条带;获取至少一条新正常条带的第二条带信息;将第二条带信息发送给元数据服务器,以使元数据服务器添加第二条带信息。应用本发明实施例中,使得损坏条带对应的正常数据块再损坏时,该再损坏的正常数据块中存储的流式数据能够被修复。
-
-
-
-
-
-
-
-
-