一种网页爬虫系统及方法

    公开(公告)号:CN102262635A

    公开(公告)日:2011-11-30

    申请号:CN201010189998.6

    申请日:2010-05-25

    Inventor: 肖小剑 李天武

    Abstract: 本发明公开了一种网页爬虫系统及方法,解决现有技术中不能有效提取动态URL的技术缺陷,其中该方法包括:设置一第一去重队列;接收一目标页面;采用静态爬虫对该目标页面进行爬行;将该目标页面中该静态爬虫分析不了的统一资源定位符(URL)作为动态URL;将该动态URL提交到该第一去重队列;采用动态爬虫继续对该第一去重队列中的动态URL进行爬行。本发明克服了现有技术中无法有效提取动态URL的技术缺陷,有效提高了网页搜索效率和性能,有利于维护网页的安全应用。

    一种安全网关及其转发网页的方法

    公开(公告)号:CN102469113B

    公开(公告)日:2014-08-20

    申请号:CN201010532887.0

    申请日:2010-11-01

    Inventor: 叶润国 肖小剑

    Abstract: 本发明公开了一种安全网关及其转发网页的方法;所述方法包括:当从服务器得到客户端请求的Web页面后,将预先生成的移动代码依附到待转发Web页面中;所述移动代码被设置成当执行时遍历所依附的Web页面对应的文档对象模型,抽取出指定HTML标签中的URL,并将抽取出的URL与预先设置的恶意URL集合进行匹配;在依附了所述移动代码的所述Web页面中添加命令语句;所述命令语句设置成当所述Web页面被加载时触发所述移动代码执行;将依附了所述移动代码并添加语句后的Web页面转发给所述客户端。本发明能够在不加重安全网关计算开销的情况下,对隐藏在Web页面中的恶意URL进行准确的检测。

    一种识别网页爬虫的方法和装置

    公开(公告)号:CN102790700A

    公开(公告)日:2012-11-21

    申请号:CN201110130432.0

    申请日:2011-05-19

    Inventor: 叶润国 肖小剑

    Abstract: 本发明公开了一种识别网页爬虫的方法和装置,涉及网络安全技术领域。本发明公开的方法包括:统计Web服务器对所有Web页面请求的平均响应时间,获取一段时间内Web客户端到Web服务器的Web网页请求,测量出各相邻Web网页请求时间间隔以及各Web页面请求响应时间,根据Web页面请求响应时间修正相邻Web网页请求时间间隔,判定修正后的相邻Web页面请求时间间隔是否大于或等于一预定的相邻网页请求时间间隔阈值δ,根据各判断结果是否满足预设条件,来判断所述web客户端的操作是否为网络爬虫。本发明的实施例可以简单、快速地检测出隐藏的网页爬虫,并且适用性强,能够为后续的安全响应提供宝贵的响应时间。

    入侵检测系统及其检测方法

    公开(公告)号:CN102571719A

    公开(公告)日:2012-07-11

    申请号:CN201010616341.3

    申请日:2010-12-31

    Inventor: 肖小剑

    Abstract: 本发明公开了一种入侵检测系统及其检测方法,克服现有技术中无线网络安全性较低的缺陷。其中该入侵检测系统包括:攻击事件库,用于存储预先设置的无线网络攻击事件模型;捕包模块,用于从无线网络上捕获无线数据包;解码解密模块,用于对所述无线数据包进行解码解密,获得明文数据包;协议解析模块,用于对所述明文数据包进行协议解析,获得明文数据与无线网络协议;检测模块,用于根据所述无线网络攻击事件模型及无线网络协议对所述明文数据进行匹配检测,获得检测结果。本发明的技术方案可以检测出攻击者对无线网络的攻击事件,提高了无线网络的安全性。

    一种安全网关及其转发网页的方法

    公开(公告)号:CN102469113A

    公开(公告)日:2012-05-23

    申请号:CN201010532887.0

    申请日:2010-11-01

    Inventor: 叶润国 肖小剑

    Abstract: 本发明公开了一种安全网关及其转发网页的方法;所述方法包括:当从服务器得到客户端请求的Web页面后,将预先生成的移动代码依附到待转发Web页面中;所述移动代码被设置成当执行时遍历所依附的Web页面对应的文档对象模型,抽取出指定HTML标签中的URL,并将抽取出的URL与预先设置的恶意URL集合进行匹配;在依附了所述移动代码的所述Web页面中添加命令语句;所述命令语句设置成当所述Web页面被加载时触发所述移动代码执行;将依附了所述移动代码并添加语句后的Web页面转发给所述客户端。本发明能够在不加重安全网关计算开销的情况下,对隐藏在Web页面中的恶意URL进行准确的检测。

    一种识别网页爬虫的方法和装置

    公开(公告)号:CN102790700B

    公开(公告)日:2015-06-10

    申请号:CN201110130432.0

    申请日:2011-05-19

    Inventor: 叶润国 肖小剑

    Abstract: 本发明公开了一种识别网页爬虫的方法和装置,涉及网络安全技术领域。本发明公开的方法包括:统计Web服务器对所有Web页面请求的平均响应时间,获取一段时间内Web客户端到Web服务器的Web网页请求,测量出各相邻Web网页请求时间间隔以及各Web页面请求响应时间,根据Web页面请求响应时间修正相邻Web网页请求时间间隔,判定修正后的相邻Web页面请求时间间隔是否大于或等于一预定的相邻网页请求时间间隔阈值δ,根据各判断结果是否满足预设条件,来判断所述web客户端的操作是否为网络爬虫。本发明的实施例可以简单、快速地检测出隐藏的网页爬虫,并且适用性强,能够为后续的安全响应提供宝贵的响应时间。

    一种漏洞挖掘方法及系统
    10.
    发明公开

    公开(公告)号:CN107835189A

    公开(公告)日:2018-03-23

    申请号:CN201711213283.8

    申请日:2017-11-28

    Inventor: 肖小剑 蒋发群

    CPC classification number: H04L63/1433

    Abstract: 本申请公开了一种漏洞挖掘方法及系统,方法包括:在向被测系统发送测试用例后,采集监控对象的状态图像,将所述状态图像与预存图像进行比对,并根据比对结果确定工业控制系统是否存在异常状态,在存在异常状态的情况下,分析确定异常原因。所述漏洞挖掘方法和系统通过采集工业控制系统中特定对象的图像,并将特定对象的图像与预存的正常状态下的对象图像进行比对,判断出工业控制系统是否存在异常状态以及异常原因。该方法的实现过程不受网络协议复杂性和业务多样性的影响,相比于现有技术分析通信返回包确定异常漏洞的技术,能够有效发现多种类型的网络及系统漏洞,提高工业控制系统的漏洞挖掘质量。

Patent Agency Ranking