用于存储数据的方法和装置

    公开(公告)号:CN108197324B

    公开(公告)日:2021-07-16

    申请号:CN201810117471.9

    申请日:2018-02-06

    Abstract: 本申请实施例公开了用于存储数据的方法和装置。该方法的一具体实施方式包括:读取目标数据集合包括的多个子数据集合,其中,子数据集合由目标数据集合划分得到;按照预先确定的第一格式,将多个子数据集合中的空集存储至第一存储空间;确定多个子数据集合中的每个数据的哈希值,得到多个哈希值集合;将多个哈希值集合中符合第一预设存储条件的哈希值集合中的各个哈希值以及哈希值的数目,按照预先确定的第二格式,存储至第二存储空间该实施方式提高了数据处理的灵活性。

    基于LSM-tree的分级存储方法、装置、OLAP数据库系统及介质

    公开(公告)号:CN108021702A

    公开(公告)日:2018-05-11

    申请号:CN201711437794.8

    申请日:2017-12-26

    Abstract: 本发明提出一种基于LSM‑tree的分级存储方法,其特征在于,采用基于LSM‑tree的树形结构组织数据库的文件存储,将导入数据库的文件进行合并操作;所述合并操作包括累积合并操作和基本合并操作;所述累积合并操作包括:将第一类型文件进行合并操作,所述第一类型文件包括已导入数据库、未进行合并操作,且满足累积合并条件的文件;所述基本合并操作包括:将第二类型文件和所述累积合并操作生成的文件进行合并操作,所述第二类型文件包括已导入数据库、未进行合并操作,且不满足累积合并条件的文件。本发明提供的实施例提高了数据合并的效率,保证了存储引擎在大规模并发读写情况下的性能要求。

    元数据的管理方法、设备及计算机可读介质

    公开(公告)号:CN108427728A

    公开(公告)日:2018-08-21

    申请号:CN201810150300.6

    申请日:2018-02-13

    Abstract: 本发明提供一种元数据的管理方法、设备及计算机可读介质。其方法包括:接收用户对元数据的操作请求;根据元数据的操作请求,对内存中存储的树状结构的元数据进行修改;根据元数据的操作请求,生成对应的日志,并写入磁盘中。与现有技术的采用第三范式的关系表存储的元数据相比,本发明的管理的元数据以树状结构存储在内存中,这样可以保证在访问时,避免使用大量的join语句,能够有效地提高元数据的访问效率。而且本发明中,还根据元数据的操作请求,生成对应的日志,并写入磁盘,可以在元数据对应的进程杀死或者单击宕机时,帮助恢复内存中的元数据,以保证元数据的持久性和安全性,避免了元数据完全丢失的风险。

    MPP数据库的管理方法、装置、系统、服务器及介质

    公开(公告)号:CN108228796A

    公开(公告)日:2018-06-29

    申请号:CN201711477888.8

    申请日:2017-12-29

    Abstract: 本发明提出一种大规模并行处理数据库的管理方法、装置、系统、服务器及介质,其中应用于主节点的方法包括:获取数据库配置信息;将所述数据库配置信息分发给从节点,以使所述从节点根据所述数据库配置信息进行大规模并行处理数据库的部署以生成部署结果;以及接收所述从节点返回的所述部署结果。本发明提供的实施例可以实现一键部署大规模并行处理数据库,集部署与监控一体化;通过服务建议模块可以最大程度优化系统的相关配置,使用户的使用指导培训成本大大降低;且水平扩展维护成本也大大降低。

    用于存储数据的方法和装置

    公开(公告)号:CN108197324A

    公开(公告)日:2018-06-22

    申请号:CN201810117471.9

    申请日:2018-02-06

    Abstract: 本申请实施例公开了用于存储数据的方法和装置。该方法的一具体实施方式包括:读取目标数据集合包括的多个子数据集合,其中,子数据集合由目标数据集合划分得到;按照预先确定的第一格式,将多个子数据集合中的空集存储至第一存储空间;确定多个子数据集合中的每个数据的哈希值,得到多个哈希值集合;将多个哈希值集合中符合第一预设存储条件的哈希值集合中的各个哈希值以及哈希值的数目,按照预先确定的第二格式,存储至第二存储空间该实施方式提高了数据处理的灵活性。

Patent Agency Ranking