一种日志数据存储、提取方法及装置

    公开(公告)号:CN109446167A

    公开(公告)日:2019-03-08

    申请号:CN201811175338.5

    申请日:2018-10-10

    Abstract: 本发明公开一种日志数据存储、提取方法及装置,包括:获取待存储的日志数据,根据预设的日志识别字段和日志详情字段提取所述日志数据的日志识别字段值和日志详情字段值;计算所述日志识别字段值的MD5值,作为所述日志数据的唯一标识;查询第一数据库中是否存在所述MD5值,若存在,则更新所述第一数据库中所述MD5值的重复次数,并将所述日志详情字段值存入至第二数据库;反之,若不存在,则在第一数据库中新增所述MD5值以及所述日志识别字段值,并在第二数据库中新增所述MD5值以及所述日志详情字段值。通过本方法可以解决日志处理时的日志字段重复存储的问题,降低日志的存储资源占用率,利用不同数据库分开读写数据可以提高日志分析效率。

Patent Agency Ranking