一种基于可视化脚本编辑器的分布式网络爬虫系统

    公开(公告)号:CN105243159A

    公开(公告)日:2016-01-13

    申请号:CN201510713985.7

    申请日:2015-10-28

    CPC classification number: G06F16/986

    Abstract: 本发明提供一种基于可视化脚本编辑器的分布式网络爬虫系统,包括:可视化脚本编辑器、分布式消息队列、任务调度模块、网页抓取模块、内容处理模块、以及结果存储模块;根据用户通过可视化界面进行输入,系统自动生成元数据提取脚本,可以识别目标站点的结构,高效的抓取特定的数据,由任务调度模块创建分派任务,网页抓取模块负责抓取页面,内容处理模块调取对应脚本将页面转换为元数据集,最后统一处理,通过结果存储模块进行存储。本发明能够大幅提高针对特定站点数据的爬取效率,减少用户劳动强度,节省系统资源,并拥有良好的可扩展性和伸缩性,适用于所有类型的互联网站点。

    一种基于人脸识别的企业员工异地考勤方法与系统

    公开(公告)号:CN104616364A

    公开(公告)日:2015-05-13

    申请号:CN201510041196.3

    申请日:2015-01-28

    CPC classification number: G07C1/10

    Abstract: 本发明提供一种基于人脸识别的企业员工异地考勤方法,包括:录入员工的基本信息并设置员工能考勤的人脸考勤设备及能在其上允许考勤的时期;选择员工能进行考勤的任意一人脸考勤设备,发送人脸采集命令至该人脸考勤设备对该员工进行人脸采集;人脸考勤设备将采集到的人脸图片和人脸特征发送到服务器;服务器发送新增人员命令、员工的基本信息、人脸图片和人脸特征发送到相应的人脸考勤设备;若员工上班或出差至一办公地点进行考勤时,当地的人脸考勤设备将采集该员工的人脸图像和人脸特征与本地存储的人脸图像和人脸特征匹配,判断该员工是否能在该人脸考勤设备上考勤。本发明优化了现有的考勤管理流程,为企业的考勤管理节省了人力和时间。

    带有安全认证的可靠影像数据采集和认证方法

    公开(公告)号:CN104462896A

    公开(公告)日:2015-03-25

    申请号:CN201410665326.6

    申请日:2014-11-19

    CPC classification number: G06F21/31 G06F21/6218

    Abstract: 带有安全认证的可靠影像数据采集和认证方法,包括:影像文件采集阶段:通过安全信息采集设备在采集影像的同时,对操作人员的安全信息也同时进行采集,对采集到的影像根据预先定义好的认证策略进行全面的安全认证计算,得出该影像的图像文件特征码,并和操作人员的来源安全认证信息相结合,对二者的信息进行一对一的捆绑和合并,保存到系统中;二次认证阶段:对需要进行安全认证的图片采用采集时相同的认证策略再次进行计算,得到该图片的图像文件特征码,通过特征码的比较来确定文件的安全认证信息,找到系统中保存的安全认证信息,如果安全认证信息合法,则可以证明该图片文件来源的可靠性,否则该图片文件不可靠。

    基于Zookeeper的分布式系统的有序序列号生成方法

    公开(公告)号:CN104361065A

    公开(公告)日:2015-02-18

    申请号:CN201410613887.1

    申请日:2014-11-04

    CPC classification number: G06F17/30371

    Abstract: 本发明提供一种基于Zookeeper的分布式系统的有序序列号生成方法,所述方法为:1.在分布式系统的Zookeeper上创建有序序列根节点;2.在有序序列根节点下创建持久顺序节点;3.取得持久顺序节点的顺序号;4.删除所述顺序号的前一顺序号对应的顺序节点。本发明利用了Zookeeper的数据强一致性和持久顺序节点的节点顺序性,解决了分布式系统中多服务端高并发请求环境下有序序列号生成的问题。

Patent Agency Ranking