数据处理方法以及相关设备
    11.
    发明公开

    公开(公告)号:CN116795808A

    公开(公告)日:2023-09-22

    申请号:CN202310913228.9

    申请日:2023-07-24

    Abstract: 本申请实施例公开了数据处理方法以及相关设备,用于在降低计算成本的同时,保证特征计算的准确率以及压缩率。本申请实施例方法包括:确定每个数据块对应的多个第一特征值,每个第一特征值表示数据块包含的部分数据内容的特征;根据每个第一特征值所对应部分数据内容,将每个数据块对应的多个第一特征值划分为多组内容分簇,每个数据块对应的内容分簇数量等于预设特征数量;对每个第一特征值执行一次线性变换操作,获得每个第一特征值对应的第二特征值;将每个内容分簇对应的取值最小的第二特征值确定为每个内容分簇所对应数据块的目标特征值;根据每个数据块对应的多个目标特征值,确定每个数据块对应的相似数据块。

    数据压缩方法、装置、设备及存储介质

    公开(公告)号:CN119719054A

    公开(公告)日:2025-03-28

    申请号:CN202411781662.7

    申请日:2024-12-05

    Abstract: 本申请实施例公开了数据压缩方法及相关装置。本申请实施例方法包括:通过遍历每个分组下待压缩数据中的各个数据单元,计算各个数据单元之间的相似度;根据各个数据单元之间的相似度,确定各个数据单元之间的依赖关系;根据各个数据单元之间的依赖关系,生成依赖关系树;对依赖关系树利用图遍历算法生成各个数据单元的排序结果;基于各个数据单元的排序结果,确定每个分组中各个数据单元的排列顺序,并对每个分组下的待压缩数据进行数据压缩。本申请通过计算数据单元间的相似度并生成依赖关系树,能够挖掘数据间的潜在关联性;通过对依赖关系树利用图遍历算法生成的排序结果来优化数据单元的排列顺序,能够进一步压缩冗余信息,提升数据压缩率。

    基于纠删码的多故障数据恢复方法以及相关设备

    公开(公告)号:CN119052060A

    公开(公告)日:2024-11-29

    申请号:CN202411030520.7

    申请日:2024-07-30

    Abstract: 本申请实施例公开了一种基于纠删码的多故障数据恢复方法以及相关设备,用于在提高多故障数据恢复效率以及减少网络堵塞的情况下,进行基于纠删码的多故障数据恢复。本申请实施例方法包括:基于预设依赖恢复顺序,以及预设数据发送限制规则和/或预设数据发送优先级规则,得到每个预设多节点故障情况对应的时隙恢复方案,基于每个预设节点故障情况对应的时隙恢复方案得到预设时隙恢复方案集合,在预设时隙恢复方案集合中确定当前多节点故障情况对应的目标时隙恢复方案,执行目标时隙恢复方案,目标时隙恢复方案用于:在每个目标时隙中,按照目标时隙对应的时隙数据传输路径,由目标时隙发送节点,将目标时隙发送数据块发送至目标时隙接收节点。

Patent Agency Ranking