基于列式存储数据库的网络流量索引方法、装置和介质

    公开(公告)号:CN117112565A

    公开(公告)日:2023-11-24

    申请号:CN202311092064.4

    申请日:2023-08-28

    Inventor: 汪俊峰 蔡福杰

    Abstract: 本申请涉及一种基于列式存储数据库的网络流量索引方法、装置和介质,其中,基于列式存储数据库的网络流量索引方法包括:实时从网络适配器捕获网络流量数据包,获取若干个会话片段信息,将若干所述会话片段信息存储在列式存储数据库中的索引表中;其中,所述索引表包括一张主索引表以及多张二级索引表,所述主索引表包括数据包位置列表,所述主索引表和各所述二级索引表通过索引ID进行关联;根据用户提供的查询条件,选择适配的所述二级索引表进行检索,获得符合查询条件的索引ID;使用所述索引ID在主索引表中查询,获得对应的数据包位置列表;基于所述数据包位置列表,从磁盘数据包文件中下载对应的网络流量数据包,提高了数据包检索效率。

    一种网络流量检索方法、装置、设备及存储介质

    公开(公告)号:CN115858462A

    公开(公告)日:2023-03-28

    申请号:CN202211465638.3

    申请日:2022-11-22

    Inventor: 汪俊峰 刘元

    Abstract: 本申请公开了一种网络流量检索方法、装置、设备及存储介质,涉及检索技术领域,包括:从网络适配器中实时捕获网络流量数据包,并按照用户配置判断是否对网络流量数据包进行压缩;基于判断结果将网络流量数据包写入相应的数据包文件中,并确定出网络流量数据包对应的位置向量;基于预设索引算法和位置向量生成各检索维度对应的树结构索引,并将索引写入索引文件中;利用预设检索算法,并根据用户指定的检索条件对索引文件进行检索以获取目标网络流量数据包对应的目标位置向量,并根据目标位置向量从目标数据包文件中获取目标网络流量数据包。本申请生成数据包的各检索维度对应的树结构索引,对索引文件进行检索,能够避免会话重组,提高检索性能。

Patent Agency Ranking