一种基于Redis的多型无人机统一数据接入与处理系统

    公开(公告)号:CN108965303B

    公开(公告)日:2021-01-26

    申请号:CN201810823137.5

    申请日:2018-07-25

    IPC分类号: H04L29/06 H04L29/08 H04J3/06

    摘要: 本发明公开了一种基于Redis的多型无人机数据统一接入与处理系统,包括数据接入服务器、数据转发服务器、Redis服务器、视频处理服务器群、NTP服务器、数据库服务器和客户端。数据接入服务器根据不同无人机类型接收来自不同无人机的数据,并添加本地服务器时间戳和视频元数据,而后将无人机数据发送到数据转发服务器。数据转发服务器根据协议规则解析出数据,并将数据信息存储至Redis服务器。视频处理服务器群通过从Redis服务器获取数据信息,并通过UDP进行数据广播,对视频数据进行录制、可疑目标自动检测及跟踪。客户端通过UDP广播接收无人机数据信息。客户端读取具有标准格式的视频帧和飞行载荷数据,而不需要根据不同的无人机类型进行视频和飞行数据格式适配。

    一种基于海量交通数据统计的定向套牌车检测方法

    公开(公告)号:CN105913668A

    公开(公告)日:2016-08-31

    申请号:CN201610523940.8

    申请日:2016-07-04

    IPC分类号: G08G1/017

    CPC分类号: G08G1/017

    摘要: 本发明公开了一种基于海量交通数据统计的定向套牌车检测方法,包括:步骤1,设置一个初始时间t0,划定一个时间范围T1,按车牌号码统计(t0?T1,t0)时间范围内的所有卡口行车数据,统计每个出现的车牌号码出现的次数,并将车牌号码按照出现次数从高到低进行排序;步骤2,将车牌号码按照出现次数从高到低进行排序得到的序列取前N个车牌号码;步骤3,从卡口行车数据中查询N个车牌号码在(t0?T2,t0)时间范围的所有数据记录;步骤4,根据车牌号码所对应的卡口数据记录集合以及卡口行车数据记录的车辆行车时间和卡口地点,对车辆所形成的轨迹进行判断,当出现不合理的轨迹时,则判定车辆是套牌车,否则判定车辆不是套牌车。

    一种分布式图像索引与检索方法

    公开(公告)号:CN105205169A

    公开(公告)日:2015-12-30

    申请号:CN201510657308.8

    申请日:2015-10-12

    IPC分类号: G06F17/30

    摘要: 本发明提出了一种分布式图像索引与检索方法,包括:搭建Hadoop分布式系统集群,包括HDFS分布式文件系统、YARN资源管理器、ZooKeeper分布式应用程序协调服务、Spark集群计算环境和HBase数据库;部署配置基于YARN资源管理器的Spark集群;启动图像索引流处理任务;启动图像检索流处理任务;图像索引流处理任务接收外部输入图像并建立索引;图像检索流处理任务接收待检索图像,输出检索到的相似图像。本发明采用了基于内存计算的Spark Streaming技术,能够实现图像处理任务和特征提取任务的分布式快速计算,具有高度的实时性。

    一种插件式异构Syslog接入处理系统及方法

    公开(公告)号:CN113704226B

    公开(公告)日:2023-01-31

    申请号:CN202110969343.9

    申请日:2021-08-23

    摘要: 本发明公开了一种插件式异构Syslog接入处理系统及方法,所述系统包括流处理任务管理模块、数据流输入模块、数据流处理模块、数据流输出模块、外部数据管理模块和插件脚本管理模块。数据流输入模块支持接入各类异构Syslog数据,通过数据流处理模块进行数据清洗、转换、格式化、富化等处理操作,通过数据流输出模块输出到数据库、Logstash服务器、日志服务器或消息队列。插件脚本管理模块对插件脚本进行管理。流处理任务管理模块负责对各处理模块的执行状态进行监控和管理。外部数据管理模块支持引入外部数据源,支撑数据处理相关操作。本发明实现了对多源异构Syslog数据的灵活接入、处理和输出,有效过滤无用告警数据,为更快处理威胁事件提供技术支撑。

    一种插件式异构Syslog接入处理系统及方法

    公开(公告)号:CN113704226A

    公开(公告)日:2021-11-26

    申请号:CN202110969343.9

    申请日:2021-08-23

    摘要: 本发明公开了一种插件式异构Syslog接入处理系统及方法,所述系统包括流处理任务管理模块、数据流输入模块、数据流处理模块、数据流输出模块、外部数据管理模块和插件脚本管理模块。数据流输入模块支持接入各类异构Syslog数据,通过数据流处理模块进行数据清洗、转换、格式化、富化等处理操作,通过数据流输出模块输出到数据库、Logstash服务器、日志服务器或消息队列。插件脚本管理模块对插件脚本进行管理。流处理任务管理模块负责对各处理模块的执行状态进行监控和管理。外部数据管理模块支持引入外部数据源,支撑数据处理相关操作。本发明实现了对多源异构Syslog数据的灵活接入、处理和输出,有效过滤无用告警数据,为更快处理威胁事件提供技术支撑。

    分布式自学习异常流量协同检测方法及系统

    公开(公告)号:CN112367303A

    公开(公告)日:2021-02-12

    申请号:CN202011132314.9

    申请日:2020-10-21

    摘要: 本发明实施例公开了一种分布式自学习异常流量协同检测方法及系统,涉及互联网技术领域,能够更全面得过滤更多异常流量,降低系统虚警率。本发明包括:通过流量分类器对输入的流量进行分类,筛选出恶意流量;将恶意流量上传至综合管理模块;综合管理模块对分析节点上报的恶意流量进行标注得到恶意流量样本;综合管理模块将恶意流量样本归入系统样本库,并将恶意流量样本下发至指定的分析节点;指定的分析节点根据综合管理模块下发的恶意流量样本,更新指定的分析节点对应的节点样本库;指定的分析节点,通过权重训练模块,根据更新后的节点样本库训练权重模型,得到更新后的权重,并将更新后的权重导入流量分类器。本发明适用于大规模分布式系统。

    一种分布式可见光遥感影像动态目标检测与分析系统

    公开(公告)号:CN108932303A

    公开(公告)日:2018-12-04

    申请号:CN201810599819.2

    申请日:2018-06-12

    IPC分类号: G06F17/30 G06K9/00

    摘要: 本发明公开了一种分布式可见光遥感影像动态目标检测与分析系统,包括Web服务模块、地图服务模块、Kafka消息队列集群、HBase数据库服务模块、图像处理集群以及Elasticsearch数据索引集群;Web服务模块提供地图显示、影像处理任务监控与管理、目标检索结果显示、挖掘分析结果显示功能;地图服务模块采用金字塔瓦片格式对可见光遥感影像数据进行存储和管理;Kafka消息队列集群由若干消息处理服务器组成;图像处理集群提供遥感影像动态目标检测、目标分类及目标特征提取功能;HBase数据库服务模块提供目标属性和图像数据的存储服务;Elasticsearch数据索引集群提供索引功能。

    一种基于容器级蜜罐群的入侵检测方法及系统

    公开(公告)号:CN112367307B

    公开(公告)日:2023-05-23

    申请号:CN202011162834.4

    申请日:2020-10-27

    IPC分类号: H04L9/40

    摘要: 本发明涉及网络安全技术领域,本发明公开了一种基于容器级蜜罐群的入侵检测方法及系统,包括场景构建模块、数据采集模块、规则引擎模块和态势展现模块。一种基于容器级蜜罐群的入侵检测方法,包括以下步骤:获取蜜罐元素并构建网络拓扑搭建符合真实环境的蜜罐群。蜜罐元素中部署数据采集探针,采集蜜罐群数据信息。搭建规则引擎并进行对采集到的数据信息进行入侵检测分析。获取分析结果信息,并进行态势综合呈现。本发明构造逼真的蜜罐群,迷惑攻击人员,并能够更为有效的获悉攻击人员的攻击行为方式,搜集更多的信息,能够对根据不同需求动态构建蜜罐群属性,为保护真实系统提供更多有用的策略。