-
公开(公告)号:CN104772113B
公开(公告)日:2017-12-01
申请号:CN201510106039.6
申请日:2015-03-11
Applicant: 华南理工大学
Abstract: 本发明公开了一种石墨烯/蒙脱石纳米复合材料及其制备方法与应用。石墨烯/蒙脱石纳米复合材料的制备方法为:将十六烷基三甲基溴化铵改性后的蒙脱石悬浮液和超声处理后的氧化石墨烯悬浮液均匀混合,充分搅拌后加入还原剂进行还原,反应完成后得到黑色絮状沉淀,经洗涤、抽滤、干燥和研磨过筛后得到石墨烯/蒙脱石纳米复合材料。此方法制备的石墨烯/蒙脱石纳米复合材料可作为吸附剂用于水污染控制领域里,特别是废水中重金属污染物的吸附去除,具有制备方法简便、吸附速度快、再生容易以及可重复利用等优点,并且所需原料来源广泛、成本低,实际应用价值高。
-
公开(公告)号:CN106569895B
公开(公告)日:2020-12-22
申请号:CN201610924256.0
申请日:2016-10-24
Applicant: 华南理工大学
IPC: G06F9/50
Abstract: 本发明涉及一种基于容器的多租户大数据平台构建方法,该方法包括:基于容器虚拟化技术独立封装大数据平台的功能组件;基于描述性文件作为事务运行单元,实现大数据平台的自动部署和集群管理;通过模块结构实现细粒度集群资源访问控制;基于云服务、云安全技术为多租户环境下的大数据应用提供安全的隔离和共享策略;基于组件化的大数据计算服务消费栈构建可伸缩的大租户大数据平台。本发明方法具有自动化构建大数据平台等优点,提出了基于三层架构的大数据部署框架,简化大数据平台的集群维护,同时考虑了面向多租户的资源共享策略。
-
公开(公告)号:CN104932956B
公开(公告)日:2018-02-27
申请号:CN201510350060.0
申请日:2015-06-19
Applicant: 华南理工大学
IPC: G06F11/14
Abstract: 本发明公开的一种面向大数据的云容灾备份方法,包含以下步骤:建立文件块哈希指纹和快照指针实现对文件不同版本的压缩存储备份,同时将文件块指纹传输给私有云存储系统;私有云建立文件块指纹索引数据库,通过MapReduce任务比对哈希指纹来对传输块进行初步去重,对数据块进行细粒度的基于内容的再次分块哈希,通过另一个MapReduce子任务计算数据块的相似度矩阵和块指针分布,统计数据块的访问热度,并将指纹索引数据库与热数据缓存在存储前段,将冷数据以及归档备份数据集中存储并建立版本快照,定时备份在公有云存储系统。本发明的方法,通过缓存指纹库和热数据解决了传统容灾备份中的数据去重技术实时性较差等问题。
-
公开(公告)号:CN107948249B
公开(公告)日:2019-12-10
申请号:CN201711062730.4
申请日:2017-11-02
Applicant: 华南理工大学
Abstract: 本发明公开了一种基于服务发现和容器技术的大数据平台弹性伸缩方法,包括以下步骤:(1)使用容器技术组件化大数据平台;(2)启动大数据集群,注册集群元数据信息;(3)向服务代理汇报心跳数据并更新相关信息;(4)代理服务周期向服务代理读取大数据集群管理信息,判断是否存在节点失效或者需求变更情况,如果存在,则执行第五步骤;否则,执行第六步骤;(5)若存在节点失效情况,则尝试恢复失效的节点容器;若存在需求变更情况,则根据需求变更元数据,为集群添加或则删除节点容器;(6)重复执行以上第三至第五步骤,直至集群服务终止运行。本发明能够感知大数据平台内部状态从而进行有效弹性伸缩和提高集群资源使用率。
-
公开(公告)号:CN106502792B
公开(公告)日:2019-11-15
申请号:CN201610916059.4
申请日:2016-10-20
Applicant: 华南理工大学
IPC: G06F9/50
Abstract: 本发明涉及一种面向不同类型负载的多租户资源优化调度方法,包含以下步骤:1、系统租户提交作业并添加到作业队列中;2、采集作业负载信息发送到资源管理器;3、资源管理器根据作业负载信息判定作业不同负载类型,将类型信息发送给作业调度器;4、作业调度器根据不同负载类型执行作业调度,若为计算密集型作业直接在该节点调度,若为I/O密集型作业则对其进行延迟等待;5、汇总作业调度决策信息发送给调度重构决策器,重构目标计算节点,根据最终决策结果进行作业调度。该方法实现多租户共享集群,即减少了建立独立集群的代价,同时又使得多租户间可以共享更多的大数据集资源。面向不同类型负载优化实现更好的数据本地性,可以很好地做到作业调度中公平性和效率之间的权衡,提高整个集群的计算性能如吞吐率、作业响应时间等。
-
公开(公告)号:CN106502792A
公开(公告)日:2017-03-15
申请号:CN201610916059.4
申请日:2016-10-20
Applicant: 华南理工大学
IPC: G06F9/50
Abstract: 本发明涉及一种面向不同类型负载的多租户资源优化调度方法,包含以下步骤:1、系统租户提交作业并添加到作业队列中;2、采集作业负载信息发送到资源管理器;3、资源管理器根据作业负载信息判定作业不同负载类型,将类型信息发送给作业调度器;4、作业调度器根据不同负载类型执行作业调度,若为计算密集型作业直接在该节点调度,若为I/O密集型作业则对其进行延迟等待;5、汇总作业调度决策信息发送给调度重构决策器,重构目标计算节点,根据最终决策结果进行作业调度。该方法实现多租户共享集群,即减少了建立独立集群的代价,同时又使得多租户间可以共享更多的大数据集资源。面向不同类型负载优化实现更好的数据本地性,可以很好地做到作业调度中公平性和效率之间的权衡,提高整个集群的计算性能如吞吐率、作业响应时间等。
-
公开(公告)号:CN104772113A
公开(公告)日:2015-07-15
申请号:CN201510106039.6
申请日:2015-03-11
Applicant: 华南理工大学
Abstract: 本发明公开了一种石墨烯/蒙脱石纳米复合材料及其制备方法与应用。石墨烯/蒙脱石纳米复合材料的制备方法为:将十六烷基三甲基溴化铵改性后的蒙脱石悬浮液和超声处理后的氧化石墨烯悬浮液均匀混合,充分搅拌后加入还原剂进行还原,反应完成后得到黑色絮状沉淀,经洗涤、抽滤、干燥和研磨过筛后得到石墨烯/蒙脱石纳米复合材料。此方法制备的石墨烯/蒙脱石纳米复合材料可作为吸附剂用于水污染控制领域里,特别是废水中重金属污染物的吸附去除,具有制备方法简便、吸附速度快、再生容易以及可重复利用等优点,并且所需原料来源广泛、成本低,实际应用价值高。
-
公开(公告)号:CN107948249A
公开(公告)日:2018-04-20
申请号:CN201711062730.4
申请日:2017-11-02
Applicant: 华南理工大学
Abstract: 本发明公开了一种基于服务发现和容器技术的大数据平台弹性伸缩方法,包括以下步骤:(1)使用容器技术组件化大数据平台;(2)启动大数据集群,注册集群元数据信息;(3)向服务代理汇报心跳数据并更新相关信息;(4)代理服务周期向服务代理读取大数据集群管理信息,判断是否存在节点失效或者需求变更情况,如果存在,则执行第五步骤;否则,执行第六步骤;(5)若存在节点失效情况,则尝试恢复失效的节点容器;若存在需求变更情况,则根据需求变更元数据,为集群添加或则删除节点容器;(6)重复执行以上第三至第五步骤,直至集群服务终止运行。本发明能够感知大数据平台内部状态从而进行有效弹性伸缩和提高集群资源使用率。
-
公开(公告)号:CN106569895A
公开(公告)日:2017-04-19
申请号:CN201610924256.0
申请日:2016-10-24
Applicant: 华南理工大学
IPC: G06F9/50
Abstract: 本发明涉及一种基于容器的多租户大数据平台构建方法,该方法包括:基于容器虚拟化技术独立封装大数据平台的功能组件;基于描述性文件作为事务运行单元,实现大数据平台的自动部署和集群管理;通过模块结构实现细粒度集群资源访问控制;基于云服务、云安全技术为多租户环境下的大数据应用提供安全的隔离和共享策略;基于组件化的大数据计算服务消费栈构建可伸缩的大租户大数据平台。本发明方法具有自动化构建大数据平台等优点,提出了基于三层架构的大数据部署框架,简化大数据平台的集群维护,同时考虑了面向多租户的资源共享策略。
-
公开(公告)号:CN104932956A
公开(公告)日:2015-09-23
申请号:CN201510350060.0
申请日:2015-06-19
Applicant: 华南理工大学
IPC: G06F11/14
Abstract: 本发明公开的一种面向大数据的云容灾备份方法,包含以下步骤:建立文件块哈希指纹和快照指针实现对文件不同版本的压缩存储备份,同时将文件块指纹传输给私有云存储系统;私有云建立文件块指纹索引数据库,通过MapReduce任务比对哈希指纹来对传输块进行初步去重,对数据块进行细粒度的基于内容的再次分块哈希,通过另一个MapReduce子任务计算数据块的相似度矩阵和块指针分布,统计数据块的访问热度,并将指纹索引数据库与热数据缓存在存储前段,将冷数据以及归档备份数据集中存储并建立版本快照,定时备份在公有云存储系统。本发明的方法,通过缓存指纹库和热数据解决了传统容灾备份中的数据去重技术实时性较差等问题。
-
-
-
-
-
-
-
-
-