一种任务驱动的海量网络日志高效筛选分发方法及装置

    公开(公告)号:CN119106014A

    公开(公告)日:2024-12-10

    申请号:CN202411006526.0

    申请日:2024-07-25

    Abstract: 本发明是有关于一种任务驱动的海量网络日志高效筛选分发方法及装置,针对超大规模网络日志数据筛选分发存在的性能瓶颈问题,提出了一种多任务高效并行筛选和分发的创新方案。该方案聚焦于网络日志数据的智能化筛选与灵活分发,旨在整合共性计算需求、消除重复运算、优化资源配置、提升任务并发处理能力。具体实施中,本发明通过分解与合并跨任务日志筛选逻辑,结合常驻实时数据筛选与周期性离线筛选任务,系统性地完成了数据的精细化按需筛选、字段富化、数据分级和历史数据预存储,从而能够根据上层业务的实际需求,为不同任务动态且精准地分发合适的数据,为网络威胁监测、流量行为分析等应用提供数据支撑。

    一种数据异常监测方法、装置、电子设备及存储介质

    公开(公告)号:CN117879969A

    公开(公告)日:2024-04-12

    申请号:CN202410168702.4

    申请日:2024-02-06

    Abstract: 本申请公开了一种数据异常监测方法、装置、电子设备及存储介质,所述方法,包括:获取当前时间周期内当前时间窗口的指定源IP与目的IP对应的网络流量日志;根据网络流量日志统计在当前时间窗口源IP向目的IP发送的流量大小值,以及源IP接收的目的IP发送的流量大小值;根据源IP向目的IP发送的流量大小值、源IP接收的目的IP发送的流量大小值、流量基线与流量告警阈值,判断源IP与目的IP之间传输的流量是否异常;若确定源IP与目的IP之间传输的流量异常,则生成源IP与目的IP在当前时间窗口对应的异常告警日志;对源IP与目的IP产生的异常告警日志进行联合分析,得到分析结果,从而,提高了对风险事件检测的准确性。

    DNS报文解析改进方法、装置、改进设备及存储介质

    公开(公告)号:CN115379027A

    公开(公告)日:2022-11-22

    申请号:CN202210462789.7

    申请日:2022-04-27

    Abstract: 本发明实施例涉及一种DNS报文解析改进方法、装置、改进设备及存储介质,包括:获取第一设备提供的进程以及进程对应的监听端口,监听端口对应设置有第一监听端口号;在接收到第二设备发送的DNS报文的解析请求时,通过第三设备将DNS报文中的第二监听端口号更新为第一监听端口号,得到携带有第一监听端口号的DNS报文;将该DNS报文发送至第一设备对应的进程,以返回DNS报文对应的携带有第一监听端口号的应答报文;将应答报文中的第一监听端口号更新为第二监听端口号,得到携带有第二监听端口号的应答报文;将该应答报文发送给第二设备,通过创建多进程和修改DNS报文对应端口号,完成DNS报文的解析处理。由此,可以实现提高DNS报文解析的处理效率的效果。

    一种分析网络流量检测大规模恶意代码传播的方法

    公开(公告)号:CN114826670A

    公开(公告)日:2022-07-29

    申请号:CN202210295069.6

    申请日:2022-03-23

    Abstract: 本发明是有关于一种分析网络流量检测大规模恶意代码传播的方法,通过分析网络流入流出流量捕获还原文件,记录分析文件传播日志;对大规模传播的文件或传播规模增长迅速的文件,综合利用威胁情报数据和动态沙箱养殖技术判断其恶意性,实现大规模恶意代码传播事件的第一时间发现;最后关联分析大规模传播恶意代码的文件、I P、域名、URL等信息,还原传播路径。通过分析网络文件传播日志,可全面掌握特定网络恶意代码传播态势,保证了恶意性判别的准确性,使覆盖范围更加全面、检测分析更加准确、更加及时高效。

Patent Agency Ranking