发明授权
- 专利标题: 一种网络数据采集方法及系统
-
申请号: CN202110421317.2申请日: 2021-04-19
-
公开(公告)号: CN113132383B公开(公告)日: 2022-03-25
- 发明人: 段东圣 , 王海洋 , 时磊 , 佟玲玲 , 段运强 , 任博雅 , 井雅琪 , 李真 , 张旋 , 田伟裕 , 王丽萍
- 申请人: 烟台中科网络技术研究所 , 国家计算机网络与信息安全管理中心
- 申请人地址: 山东省烟台市高新区蓝海路1号;
- 专利权人: 烟台中科网络技术研究所,国家计算机网络与信息安全管理中心
- 当前专利权人: 烟台中科网络技术研究所,国家计算机网络与信息安全管理中心
- 当前专利权人地址: 山东省烟台市高新区蓝海路1号;
- 代理机构: 烟台上禾知识产权代理事务所
- 代理商 赵加鑫
- 主分类号: H04L69/22
- IPC分类号: H04L69/22 ; H04L67/562 ; G06N3/08
摘要:
本发明涉及大数据技术领域。本发明公开了一种网络数据采集系统,该系统包括服务器,服务器包括:任务下发模块,用于创建用户信息获取任务,将用户信息获取任务分配至不同的任务池,计算任务池优先级,根据任务下发规则,得到并传输具有优先级参数的用户信息获取任务;数据解析模块,与任务下发模块数据连接,用于获取来自中间代理服务端的用户信息流量数据,数据解析模块构建报文解析神经网络模型,将待解析报文信息输入训练后报文解析神经网络模型,判断待解析报文信息中是否包括指定用户信息并提取。通过设置任务优先级,优先处理重要的任务,提高任务处理效率。本公开实施例还公开了一种网络数据采集方法。
公开/授权文献
- CN113132383A 一种网络数据采集方法及系统 公开/授权日:2021-07-16