-
公开(公告)号:CN107918561A
公开(公告)日:2018-04-17
申请号:CN201711142542.2
申请日:2017-11-17
Applicant: 东北大学
IPC: G06F9/50
CPC classification number: G06F9/5027 , G06F9/5044 , G06F9/5083
Abstract: 本发明提出一种工业分布式数据采集系统中的任务分配方法,该方法综合考虑采集节点资源利用率、采集效率、负载均衡、采集可靠性、异构采集节点等多重因素,建立基于仿真的初始采集节点个数优化模型和初始任务分配优化模型,根据各采集节点实际配置和使用情况,对工作的采集节点个数进行优化,提高了采集资源利用率,实现了工业分布式数据采集系统中各采集节点资源配置和资源使用情况不同条件下,既包含1:1冗余任务又包含非冗余任务的任务初始分配,满足了工业大数据环境下工业分布式数据采集对采集实时性、可靠性、资源有效利用等的需求。
-
公开(公告)号:CN106357426A
公开(公告)日:2017-01-25
申请号:CN201610736266.1
申请日:2016-08-26
Applicant: 东北大学
IPC: H04L12/24 , H04L29/08 , G08C17/02 , G05B19/418
CPC classification number: Y02P90/02 , H04L41/04 , G05B19/418 , G05B19/4183 , G05B19/41845 , G08C17/02 , H04L67/10
Abstract: 本发明提出一种基于工业云的大规模分布式智能数据采集系统及方法,属于数据采集技术领域,本发明加入用户管理模块对系统用户进行权限验证;加入日志管理功能,对各采集周期的采集结果、存储结果以及报警日志进行记录;加入资源调度功能,根据用户设定的采集任务量确定初始工作的采集节点,其余采集节点作为冗余热备,同时在系统异常时对采集节点进行调度;加入监控报警功能,对系统各方面进行实时监控,且能够对系统异常进行实时报警;加入数据压缩功能,对采集数据进行压缩,节省空间提高效率;当存在采集节点异常时在当前采集周期,备份的采集节点将对应的备份采集任务的采集结果存入数据库,保证了当前采样周期采集的容错性和可靠性。
-
公开(公告)号:CN106249689A
公开(公告)日:2016-12-21
申请号:CN201610833009.X
申请日:2016-09-19
Applicant: 东北大学
IPC: G05B19/05
CPC classification number: G05B19/056 , G05B2219/13188
Abstract: 本发明提供一种基于无线传输的电熔镁炉数据采集系统及方法,该系统包括供电模块、PLC模块、无线数据传输模块、串口转换模块、企业端服务器;供电模块对PLC模块和无线数据传输模块进行供电;PLC模块实时采集现场电熔镁炉生产过程的模拟量数据和数字量数据,并对采集到的模拟量数据进行滤波,将滤波后的模拟量数据和采集到的数字量数据进行存储,并传送至无线数据传输模块;无线数据传输模块将PLC模块滤波后的模拟量数据和采集到的数字量数据传输至企业端服务器;企业端服务器接收滤波后的模拟量数据和采集到的数字量数据,并存储于数据库。该系统具有成本低,维护和升级方便,扩展灵活的特点。
-
公开(公告)号:CN106126346A
公开(公告)日:2016-11-16
申请号:CN201610522950.X
申请日:2016-07-05
Applicant: 东北大学
CPC classification number: G06F9/5038 , G06F9/5044 , G06F9/5083 , G06F11/1456 , G06F11/1458 , G06F2209/501 , G06F2209/5021
Abstract: 本发明提出一种大规模分布式数据采集系统及方法,属于数据采集技术领域,该系统包括任务分配节点模块、管理节点模块、任务仓库模块和采集节点模块;管理节点用于提供分布式协同服务,接收并管理采集节点和任务分配节点的注册信息,按照一定的频率与采集节点和任务分配节点进行通信;任务分配节点用于对采集任务进行设定、分配和监控;任务仓库用于接收和存放任务分配节点发送来的采集任务;采集节点用于从任务输入仓库中获取采集任务,并完成对现场控制站中相应数据的采集;采集节点执行的采集任务可根据用户设定动态变化,任务分配节点和采集节点中的某个或某几个故障不会影响当前采集周期采集结果,具有高灵活性、高容错性和高可靠性。
-
公开(公告)号:CN108536539B
公开(公告)日:2021-12-17
申请号:CN201810384049.X
申请日:2018-04-26
Applicant: 东北大学
Abstract: 本发明提供一种工业分布式数据采集系统中的任务调度方法,涉及数据采集技术领域。该方法包括建立各采集节点采集资源和采集任务的对应关系、各采集节点采集时间和采集任务及节点资源利用率的对应关系、各采集节点任务迁移所消耗资源与迁移任务个数的对应关系、各采集节点之间任务迁移的通信开销与迁移任务的对应关系,确定初始工作的最小采集节点个数并开启对应采集节点,其余采集节点资源作为共享资源备用,将初始采集任务和其中部分初始任务中重要任务的冗余任务分配给各个采集节点。本发明综合满足了工业大数据环境下工业分布式数据采集对采集实时性、可靠性、资源有效利用等的需求,提高工业数据采集系统资源利用率、采集效率和采集可靠性。
-
公开(公告)号:CN106126346B
公开(公告)日:2019-02-26
申请号:CN201610522950.X
申请日:2016-07-05
Applicant: 东北大学
Abstract: 本发明提出一种大规模分布式数据采集系统及方法,属于数据采集技术领域,该系统包括任务分配节点模块、管理节点模块、任务仓库模块和采集节点模块;管理节点用于提供分布式协同服务,接收并管理采集节点和任务分配节点的注册信息,按照一定的频率与采集节点和任务分配节点进行通信;任务分配节点用于对采集任务进行设定、分配和监控;任务仓库用于接收和存放任务分配节点发送来的采集任务;采集节点用于从任务输入仓库中获取采集任务,并完成对现场控制站中相应数据的采集;采集节点执行的采集任务可根据用户设定动态变化,任务分配节点和采集节点中的某个或某几个故障不会影响当前采集周期采集结果,具有高灵活性、高容错性和高可靠性。
-
公开(公告)号:CN106354774A
公开(公告)日:2017-01-25
申请号:CN201610702102.7
申请日:2016-08-22
Applicant: 东北大学
IPC: G06F17/30
CPC classification number: G06F16/1744
Abstract: 本发明提供一种实时工业过程大数据压缩存储系统及方法,涉及大数据分析技术领域。包括数据采集模块、日志文件存储模块、内存缓存模块、数据压缩模块、非关系型数据库和渲染器,利用数据采集模块采集实时工业过程数据,并同步发送到内存缓存模块和日志文件存储模块,对内存缓存模块中的数据进行压缩,将压缩后的数据存储到非关系型数据库中。本发明能有效解决实时工业过程大数据的存储问题,对实时工业过程大数据最大化压缩,并采用非关系型数据库进行存储,既有效地解决对实时工业过程数据的存储,又能为企业节省存储实时工业过程大数据产生的巨额成本,并可以快速响应数据的在线查询、计算等。
-
公开(公告)号:CN107918561B
公开(公告)日:2021-03-26
申请号:CN201711142542.2
申请日:2017-11-17
Applicant: 东北大学
IPC: G06F9/50
Abstract: 本发明提出一种工业分布式数据采集系统中的任务分配方法,该方法综合考虑采集节点资源利用率、采集效率、负载均衡、采集可靠性、异构采集节点等多重因素,建立基于仿真的初始采集节点个数优化模型和初始任务分配优化模型,根据各采集节点实际配置和使用情况,对工作的采集节点个数进行优化,提高了采集资源利用率,实现了工业分布式数据采集系统中各采集节点资源配置和资源使用情况不同条件下,既包含1:1冗余任务又包含非冗余任务的任务初始分配,满足了工业大数据环境下工业分布式数据采集对采集实时性、可靠性、资源有效利用等的需求。
-
公开(公告)号:CN106354774B
公开(公告)日:2019-07-23
申请号:CN201610702102.7
申请日:2016-08-22
Applicant: 东北大学
IPC: G06F16/174
Abstract: 本发明提供一种实时工业过程大数据压缩存储系统及方法,涉及大数据分析技术领域。包括数据采集模块、日志文件存储模块、内存缓存模块、数据压缩模块、非关系型数据库和渲染器,利用数据采集模块采集实时工业过程数据,并同步发送到内存缓存模块和日志文件存储模块,对内存缓存模块中的数据进行压缩,将压缩后的数据存储到非关系型数据库中。本发明能有效解决实时工业过程大数据的存储问题,对实时工业过程大数据最大化压缩,并采用非关系型数据库进行存储,既有效地解决对实时工业过程数据的存储,又能为企业节省存储实时工业过程大数据产生的巨额成本,并可以快速响应数据的在线查询、计算等。
-
公开(公告)号:CN106357426B
公开(公告)日:2019-04-26
申请号:CN201610736266.1
申请日:2016-08-26
Applicant: 东北大学
IPC: H04L12/24 , H04L29/08 , G08C17/02 , G05B19/418
Abstract: 本发明提出一种基于工业云的大规模分布式智能数据采集系统及方法,属于数据采集技术领域,本发明加入用户管理模块对系统用户进行权限验证;加入日志管理功能,对各采集周期的采集结果、存储结果以及报警日志进行记录;加入资源调度功能,根据用户设定的采集任务量确定初始工作的采集节点,其余采集节点作为冗余热备,同时在系统异常时对采集节点进行调度;加入监控报警功能,对系统各方面进行实时监控,且能够对系统异常进行实时报警;加入数据压缩功能,对采集数据进行压缩,节省空间提高效率;当存在采集节点异常时在当前采集周期,备份的采集节点将对应的备份采集任务的采集结果存入数据库,保证了当前采样周期采集的容错性和可靠性。
-
-
-
-
-
-
-
-
-