大数据存储方法、装置、电子设备及存储介质

    公开(公告)号:CN114610711A

    公开(公告)日:2022-06-10

    申请号:CN202210073751.0

    申请日:2022-01-21

    Inventor: 林皓 孙肇华 杨泳

    Abstract: 本发明提供一种大数据存储方法、装置、电子设备及存储介质,所述方法包括:采集流程,利用数据采集器对待采集数据进行分类采集,得到索引数据;提取流程,提取所述索引数据的特征标签,并基于所述待采集数据的关联关系获取所述特征标签之间的关联关系;存储流程,将所述特征标签和所述特征标签之间的关联关系以链式存储结构的方式保存到关系型数据库中。本发明提供的大数据存储方法、装置、电子设备及存储介质,在数据存储后保证了数据之间的关联关系不丢失,且有利于实现后续对存储数据的快速查询。

    一种集群数据实时查询方法及系统

    公开(公告)号:CN106294826A

    公开(公告)日:2017-01-04

    申请号:CN201610681964.6

    申请日:2016-08-17

    CPC classification number: G06F16/245 G06F16/27

    Abstract: 本发明提供了一种集群数据实时查询方法及系统,其中,集群数据实时查询方法包括以下步骤:获取客户端的查询请求,所述查询请求携带所述查询数据的地址内容;将所述查询请求发送至Hadoop集群数据平台的Hbase数据库接口并读取查询数据;将所述查询数据写入暂存文件中,所述暂存文件位于查询服务器的缓存中;将所述暂存文件发送至所述客户端。本发明实施例通过缓存的设置减少了对数据库的查询次数以及与客户端数据传输的速度,从而使集群数据的查询时间由分钟级变为秒级,实现了集群数据的实时查询。

    日志审计方法、装置、电子设备及存储介质

    公开(公告)号:CN112699090B

    公开(公告)日:2024-05-14

    申请号:CN202011540069.5

    申请日:2020-12-23

    Abstract: 本申请提供一种日志审计方法、装置、电子设备及存储介质,其中方法包括:确定待审计的日志数据集;确定所述日志数据集对应的所有安全分类标签的报警级别和日志数量;基于任一安全分类标签的报警级别和日志数量,确定所述任一安全分类标签的风险预警值;基于每一安全分类标签的风险预警值,确定所述日志数据集的审计结果。本申请提供的方法、装置、电子设备及存储介质,提高了日志审计的效率和稳定性,减轻了日志审计人员的工作量。

    日志审计方法、装置、电子设备及存储介质

    公开(公告)号:CN112699090A

    公开(公告)日:2021-04-23

    申请号:CN202011540069.5

    申请日:2020-12-23

    Abstract: 本申请提供一种日志审计方法、装置、电子设备及存储介质,其中方法包括:确定待审计的日志数据集;确定所述日志数据集对应的所有安全分类标签的报警级别和日志数量;基于任一安全分类标签的报警级别和日志数量,确定所述任一安全分类标签的风险预警值;基于每一安全分类标签的风险预警值,确定所述日志数据集的审计结果。本申请提供的方法、装置、电子设备及存储介质,提高了日志审计的效率和稳定性,减轻了日志审计人员的工作量。

    一种集群数据实时查询方法及系统

    公开(公告)号:CN106294826B

    公开(公告)日:2019-06-21

    申请号:CN201610681964.6

    申请日:2016-08-17

    Abstract: 本发明提供了一种集群数据实时查询方法及系统,其中,集群数据实时查询方法包括以下步骤:获取客户端的查询请求,所述查询请求携带所述查询数据的地址内容;将所述查询请求发送至Hadoop集群数据平台的Hbase数据库接口并读取查询数据;将所述查询数据写入暂存文件中,所述暂存文件位于查询服务器的缓存中;将所述暂存文件发送至所述客户端。本发明实施例通过缓存的设置减少了对数据库的查询次数以及与客户端数据传输的速度,从而使集群数据的查询时间由分钟级变为秒级,实现了集群数据的实时查询。

Patent Agency Ranking