数据写入、读取方法及装置、云存储系统

    公开(公告)号:CN107092437B

    公开(公告)日:2019-11-22

    申请号:CN201610088973.4

    申请日:2016-02-17

    Inventor: 金平 林起芊

    Abstract: 本发明实施例提供了一种数据写入、读取方法及装置、云存储系统,所述数据写入方法包括:接入节点接收数据写入请求;当无法获取到可用管理节点时,识别所述数据写入请求中包含的域标识信息,并根据所述域标识信息,查询预先保存的索引,其中,所述索引包含资源池与域标识信息的对应关系;识别与所述域标识信息匹配的目标资源池,其中,每个资源池中包含至少一个存储服务器;从所述目标资源池中包含的至少一个存储服务器中,确定其中一个存储服务器为目标存储服务器,并将待写入数据写入所述目标存储服务器。本实施方式能够保证在全部管理节点出现故障或管理节点集群网络异常时,云存储系统仍能正常运行,且不需要增加额外的成本。

    一种数据存储、重构方法和装置、及电子设备

    公开(公告)号:CN109144766A

    公开(公告)日:2019-01-04

    申请号:CN201710512246.0

    申请日:2017-06-28

    CPC classification number: G06F11/1056 G06F11/1048 G06F11/1076

    Abstract: 本发明实施例提供了一种数据存储、重构方法和装置、及电子设备,所述数据存储方法包括:当接收到针对目标数据的存储指令时,基于预设的第一比例,确定所述目标数据所对应的纠删码策略,其中,所述纠删码策略包括第一纠删码策略和/或第二纠删码策略,所述第一纠删码策略的安全级别高于所述第二纠删码策略,所述第一比例为:第一纠删码策略的使用次数占纠删码策略使用总次数的比例;基于所确定的纠删码策略,对所述目标数据进行切片和冗余处理,得到所述目标数据对应的多个数据片段;将所述多个数据片段分别存储于不同存储设备的存储对象中。应用本发明实施例,可以有效地提高重构效率。

    数据存储方法、存储服务器及系统

    公开(公告)号:CN108933798A

    公开(公告)日:2018-12-04

    申请号:CN201710369637.1

    申请日:2017-05-23

    Abstract: 本发明公开了一种数据存储方法、存储服务器及系统,属于数据处理领域。该方法应用于云存储系统中的存储服务器,包括:监测数据采集设备的数据发送情况;根据监测到的数据发送异常情况获取数据异常信息;向数据采集设备发送包括数据异常信息的第一数据回传请求,数据采集设备用于接收到第一数据回传请求时返回异常时间段内采集的第一数据;当接收到第一数据时,存储第一数据。本发明能够及时监测到数据采集设备向存储服务器发送数据的过程中发生的异常,将数据采集设备在异常时间段内采集的数据存储于存储服务器中,采用数据回传的方式实现了数据补全,保证了数据完整可靠,即时性强。

    媒体数据存储方法及系统
    94.
    发明公开

    公开(公告)号:CN108737484A

    公开(公告)日:2018-11-02

    申请号:CN201710273459.2

    申请日:2017-04-21

    Abstract: 本发明实施例提供了媒体数据存储方法及系统。该方法应用于图像采集设备,所述方法包括:基于第一网络地址,向目标云存储系统请求目标存储节点的网络地址;当请求成功时,基于目标存储节点的网络地址,将待存储的目标媒体数据上传至目标云存储系统;其中,目标媒体数据存储于目标云存储系统中的目标存储节点;当请求失败时,确定多云域系统中的多云域管理节点的第二网络地址,基于第二网络地址,向多云域管理节点请求备用存储节点的网络地址,并当请求成功时,基于备用存储节点的网络地址,将待存储的目标媒体数据上传至备用云存储系统。本方案可以在降低网络带宽资源的消耗以及提高媒体数据上传效率的同时,具有一定容错性。

    云存储系统、媒体数据均衡存储方法及系统

    公开(公告)号:CN108737477A

    公开(公告)日:2018-11-02

    申请号:CN201710267042.5

    申请日:2017-04-21

    Abstract: 本发明实施例提供了云存储系统、媒体数据均衡存储方法及系统。一种媒体数据均衡存储方法应用于图像采集设备,该方法包括:检测本地是否存储有未过期的会话令牌token;该token用于记录与该图像采集设备建立租约的存储节点以及租期信息,与图像采集设备建立租约的存储节点为:基于负载均衡策略所确定出的;当检测结果为是时,基于目标token,将待存储的目标媒体数据上传至云存储系统;该目标token为本地存储的未过期的token,目标媒体数据存储于目标存储节点,目标存储节点为该目标token所对应的存储节点;当检测结果为否时,基于第一网络地址,向云存储系统申请新的token。通过本方案,可以在保证负载均衡的同时,降低网络带宽资源的消耗以及提高媒体数据上传效率。

    一种基于视频云存储系统的视频定位回放方法及装置

    公开(公告)号:CN108076376A

    公开(公告)日:2018-05-25

    申请号:CN201611030983.9

    申请日:2016-11-17

    Abstract: 本发明实施例公开了一种基于视频云存储系统的视频定位回放方法及装置,应用于客户端,所述方法包括:获得用户输入的定位时间点;确定本次定位回放所对应的目标监控点标识;利用定位时间点和目标监控点标识,从信息表中查找同时满足第一条件和第二条件的第一文件标识;当查找到时,获取与第一文件标识对应的第一视频数据;从所述定位时间点开始播放所述第一视频数据。由于在视频定位回放时客户端可以查找并播放本地缓存的视频数据,不需要每次定位回放都向存储服务器请求视频数据,大大减小了视频定位回放的时延,从而使得视频定位回放的效率明显提高。

    一种数据存储和删除方法及装置

    公开(公告)号:CN108073355A

    公开(公告)日:2018-05-25

    申请号:CN201611032369.6

    申请日:2016-11-15

    Abstract: 本发明实施例提供了一种数据存储和删除方法及装置,数据删除方法包括:获得客户端发送的携带待删除数据的第一标识信息的数据删除指令,在存储的对应关系中,查找包含第一标识信息的第一对应关系;当查找到第一对应关系后,判断第一标识信息是否对应目标数据内容;若是,将第一标识信息设置为已删除状态,通知客户端所述待删除数据已删除;若否,删除包含第一标识信息的第一对应关系,通知客户端所述待删除数据已删除。应用本发明实施例在获得数据内容与已存储数据的目标数据内容相同的待存储数据的探测请求时,不在重复存储数据内容,而是存储待存储数据与相应的已存储数据的对应关系,以节省本地的存储空间,并且,节省删除数据时所消耗的时间。

    一种数据存储方法、装置及系统

    公开(公告)号:CN108008909A

    公开(公告)日:2018-05-08

    申请号:CN201610930966.4

    申请日:2016-10-31

    Abstract: 本申请实施例提供了一种数据存储方法、装置及系统,涉及计算机技术领域。其中,数据存储方法应用于数据存储系统中的主存储服务器,该数据存储系统包括管理服务器和存储服务器。该方法包括:接收待存储至第一条带的第一数据块;向管理服务器请求针对第一数据块的第一存储地址,将第一数据块存储至第一存储地址;在确定第一数据块存储成功时,判断第一数据块是否为第一条带中的最后一个数据块;如果是,则根据第一条带中已存储成功的所有数据块,计算第一条带中的第一校验块;向管理服务器请求针对第一校验块的第二存储地址,将第一校验块存储至第二存储地址。应用本申请实施例,能够尽可能避免出现数据块和校验块不一致的问题。

    一种数据交互方法及装置
    99.
    发明公开

    公开(公告)号:CN107800552A

    公开(公告)日:2018-03-13

    申请号:CN201610801558.9

    申请日:2016-09-02

    CPC classification number: H04L67/02 H04L41/0803 H04L67/2809

    Abstract: 本发明实施例提供一种数据交互方法及装置,应用于支持命令行接口的接口模块,该方法包括:接收Web服务器发送的参数列表;解析参数列表并获得交互参数;将交互参数封装为与业务服务器的数据包格式相匹配的第二数据包;向业务服务器发送第二数据包,以使业务服务器解析第二数据包后进行数据处理并通过接口模块将处理结果反馈至Web服务器。应用本发明实施例提供的方案进行数据交互时,由于该接口模块为支持命令行接口的模块,因此Web服务器可以将交互参数拼接为参数列表,并将该参数列表发送给该接口模块,无需经过Web服务器的数据包解析和交互参数写入、以及网关接口模块的交互参数读出和数据包封装等复杂操作,提高了数据交互的速度。

    一种数据存储、删除方法、装置及分布式存储系统

    公开(公告)号:CN107656695A

    公开(公告)日:2018-02-02

    申请号:CN201610586825.5

    申请日:2016-07-25

    Abstract: 本发明提供了一种数据存储、删除方法、装置及分布式存储系统,该方法中,接收待存储的目标数据及对应的网络地址信息,生成目标数据对应的标识信息及标识信息与网络地址信息的第一对应关系,将目标数据及标识信息发送给网络地址信息对应的存储服务器,使其存储目标数据,将标识信息与保存位置信息的第二对应关系发送给网关服务器;如果在预设时间段内未接收到第二对应关系,将第一对应关系作为数据存储信息发送至元数据服务器。本发明中,通过在未接收到第二对应关系时,将第一对应关系作为数据存储信息发送至元数据服务器的方式,使元数据服务器确定目标数据在存储服务器中的保存位置信息未被传输。

Patent Agency Ranking