公开(公告)号：CN113132383A

公开(公告)日：2021-07-16

申请号：CN202110421317.2

申请日：2021-04-19

Applicant: 烟台中科网络技术研究所 ,  国家计算机网络与信息安全管理中心

Inventor： 段东圣 ,  王海洋 ,  时磊 ,  佟玲玲 ,  段运强 ,  任博雅 ,  井雅琪 ,  李真 ,  张旋 ,  田伟裕 ,  王丽萍

IPC: H04L29/06 ,  H04L29/08 ,  G06N3/08

Abstract: 本发明涉及大数据技术领域。本发明公开了一种网络数据采集系统，该系统包括服务器，服务器包括：任务下发模块，用于创建用户信息获取任务，将用户信息获取任务分配至不同的任务池，计算任务池优先级，根据任务下发规则，得到并传输具有优先级参数的用户信息获取任务；数据解析模块，与任务下发模块数据连接，用于获取来自中间代理服务端的用户信息流量数据，数据解析模块构建报文解析神经网络模型，将待解析报文信息输入训练后报文解析神经网络模型，判断待解析报文信息中是否包括指定用户信息并提取。通过设置任务优先级，优先处理重要的任务，提高任务处理效率。本公开实施例还公开了一种网络数据采集方法。

公开(公告)号：CN113132383B

公开(公告)日：2022-03-25

申请号：CN202110421317.2

申请日：2021-04-19

Applicant: 烟台中科网络技术研究所 ,  国家计算机网络与信息安全管理中心

Inventor： 段东圣 ,  王海洋 ,  时磊 ,  佟玲玲 ,  段运强 ,  任博雅 ,  井雅琪 ,  李真 ,  张旋 ,  田伟裕 ,  王丽萍

IPC: H04L69/22 ,  H04L67/562 ,  G06N3/08

Abstract: 本发明涉及大数据技术领域。本发明公开了一种网络数据采集系统，该系统包括服务器，服务器包括：任务下发模块，用于创建用户信息获取任务，将用户信息获取任务分配至不同的任务池，计算任务池优先级，根据任务下发规则，得到并传输具有优先级参数的用户信息获取任务；数据解析模块，与任务下发模块数据连接，用于获取来自中间代理服务端的用户信息流量数据，数据解析模块构建报文解析神经网络模型，将待解析报文信息输入训练后报文解析神经网络模型，判断待解析报文信息中是否包括指定用户信息并提取。通过设置任务优先级，优先处理重要的任务，提高任务处理效率。本公开实施例还公开了一种网络数据采集方法。