一种通用型分布式爬虫调度系统

    公开(公告)号:CN104820680B

    公开(公告)日:2018-04-06

    申请号:CN201510183709.4

    申请日:2015-04-17

    Applicant: 南京大学

    Abstract: 一种通用型分布式爬虫调度系统,包括控制器和爬虫器,控制器包含显示模块和调度模块,其中显示模块用于查看各种任务进展信息、日志以及触发对爬虫器的控制,调度模块包含通信区、维持区、数据保持区、数据缓存区;爬虫器包含爬取模块和调度模块,其中爬取模块实现具体的爬虫功能;调度模块包含通信区、维持区、数据保持区、数据缓存区;调度模块中的通信区之间采用Socket长连接异步通信方式完成互联;针对大数据时代获取数据效率低,存在丢失等问题,提出普适型、通用型的分布式爬虫系统框架,在保证爬取过程高速、有效、准确的同时兼容多样化的爬取策略。

    一种不饱和长链烷基的季鏻盐离子液体自组装材料

    公开(公告)号:CN107674093A

    公开(公告)日:2018-02-09

    申请号:CN201710978206.5

    申请日:2017-10-18

    Inventor: 马科锋 杨阳 刘勇

    Abstract: 本发明提供了一种(3,4,5-三(10-十一烯氧基)苯甲基)三辛基氯化鏻自组装结构材料。该材料中长链烷基末端的不饱和键可通过光引发的交联聚合把形成的季鏻盐自组装进行固定,产生固定化介孔纳米薄膜,进一步加强对自组装结构的功能化。该季鏻盐自组装材料尤其对锂离子定向导电、模板制备、介孔纳米薄膜等应用技术领域提供新型材料。

    一种面向HDFS的网络报文并行读取方法

    公开(公告)号:CN106027414A

    公开(公告)日:2016-10-12

    申请号:CN201610353612.8

    申请日:2016-05-25

    Applicant: 南京大学

    CPC classification number: H04L49/9042 H04L67/1097

    Abstract: 本发明提供一种面向HDFS的网络报文并行读取方法,包括网络数据捕获与pcap报文解析两个阶段。本方法依托Hadoop平台的分布式框架MapReduce与分布式文件系统HDFS,将捕获的网络数据包写入HDFS,并通过本发明实现的二进制pcap流解析方法将pcap报文并行的解析出来,形成key‑value对然后交由MapReduce框架进行分析处理。通过本发明中的方法大大提高了HDFS下pcap格式文件的并行读取能力,进而提高了后续网络数据包的并行分析与处理效率。

    一种通用型分布式爬虫调度系统

    公开(公告)号:CN104820680A

    公开(公告)日:2015-08-05

    申请号:CN201510183709.4

    申请日:2015-04-17

    Applicant: 南京大学

    Abstract: 一种通用型分布式爬虫调度系统,包括控制器和爬虫器,控制器包含显示模块和调度模块,其中显示模块用于查看各种任务进展信息、日志以及触发对爬虫器的控制,调度模块包含通信区、维持区、数据保持区、数据缓存区;爬虫器包含爬取模块和调度模块,其中爬取模块实现具体的爬虫功能;调度模块包含通信区、维持区、数据保持区、数据缓存区;调度模块中的通信区之间采用Socket长连接异步通信方式完成互联;针对大数据时代获取数据效率低,存在丢失等问题,提出普适型、通用型的分布式爬虫系统框架,在保证爬取过程高速、有效、准确的同时兼容多样化的爬取策略。

    一种连续生产醋酸仲丁酯的工艺

    公开(公告)号:CN101735047B

    公开(公告)日:2013-10-09

    申请号:CN200910232342.5

    申请日:2009-12-08

    Applicant: 南京大学

    Abstract: 本发明公开了一种高效连续化生产醋酸仲丁酯的工艺,它是以醋酸和1-丁烯为原料,固-液混合酸为催化剂,采用喷射碰撞流塔式反应器,精馏系统和油水分离器等装置组成的集成系统。其中喷射碰撞流塔式反应系统主要由喷射-碰撞流反应段和塔板/填料塔式反应段,强制循环和测控部分和催化剂更换部分等四大部分构成,极大地提高了醋酸的转化率及丁烯的利用率。高效连续合成醋酸仲丁酯。本发明具有结构紧凑,安全可靠,能耗低,转化率高,原料利用率高,操作成本低等综合优点。

    一种芳基热致液晶聚酯的合成方法

    公开(公告)号:CN119751829A

    公开(公告)日:2025-04-04

    申请号:CN202411881505.3

    申请日:2024-12-19

    Abstract: 本发明提供一种芳基热致液晶聚酯的合成方法,涉及聚合物材料领域;本方案采用含硼路易斯酸催化体系合成芳基热致液晶聚酯,含硼路易斯酸催化体系采用含硼路易酸催化剂;制备时,将芳基单体原料与含硼路易斯酸催化体系混合后,先向反应体系通氮气至反应体系为氮气氛围,后对反应体系进行升温处理,最后反应体系在290~350℃条件下真空反应1~24h,制得芳基热致液晶聚酯;本发明可制备出介电损耗小、高拉伸模量,最大拉伸应力可达180N/m2的芳基热致液晶聚酯,并且合成过程操作简单、反应条件易于控制,能够进行连续化生产。

Patent Agency Ranking