-
公开(公告)号:CN115016906A
公开(公告)日:2022-09-06
申请号:CN202210422612.4
申请日:2022-04-21
Applicant: 河钢数字技术股份有限公司
IPC: G06F9/48
Abstract: 本发明涉及工作流技术领域,具体为一种基于工作流任务的数据治理方法及系统,包括zookeeper框架、netty框架、quartz框架和多线程模块,所述执行流程包括以下步骤:创建保存工作流并将任务保存至关系型数据库中;多个主节点抢夺分布式锁,其中一个主节点的扫描线程获取所需执行的工作流;主节点拆分工作流为不同小任务,通过所述netty框架提交给从节点;从节点执行任务,完成后通过所述netty框架将执行结果返回主节点,由主节点将结果保存;对定时运行的任务,主节点扫描后将任务提交给所述quartz框架,自动运行相应工作流。本发明采用zookeeper,netty,quartz框架,可通过拖拽可视形式化配置任务,实时监控数据治理任务的运行状态,配置数据治理任务定时调度运行。
-
公开(公告)号:CN114780178A
公开(公告)日:2022-07-22
申请号:CN202210459346.2
申请日:2022-04-27
Applicant: 河钢数字技术股份有限公司
Abstract: 本发明公开了一种基于zeppelin的交互式分析系统,涉及计算机大数据分技术领域。包括自下而上的zeppelin interpreter、zeppelin server、外围模块和浏览器端,所述zeppelin interpreter为zeppelin处理交互式分析任务时用到的对应任务语言的解析器,所述zeppelin server为管理zeppelin interpreter的处理器,以及调度交互式分析任务、分配资源的中央管理器,所述外围模块对开源组件apache zeppelin进行封装,所述浏览器端用于登录访问所述外围模块。该基于zeppelin的交互式分析系统,工作区管理模块使用户可以管理自己的笔记本单元,统一管理笔记本;任务管理模块使用户可以更加方便地管理任务,便于用户进行任务的编写、运行或停止。
-
公开(公告)号:CN114625357A
公开(公告)日:2022-06-14
申请号:CN202210375277.7
申请日:2022-04-11
Applicant: 河钢数字技术股份有限公司
IPC: G06F8/34
Abstract: 本发明公开了一种基于二维组件多交互技术的可视化编排平台,涉及数据处理技术领域。通过图形、表格、地图、按钮、文本、翻牌器、媒体、3D模型等组件与交互事件结合,在可视化平台中构建与用户心理映射模型一致的大屏,直观的展示企业数据、工业设备、工作流程的真实情况。对多种数据源的实时采集,支持多种数据源采集与绑定,通过数字化的手段对实体对象作业过程、产生数据进行动态分析、展示;以数据形式为企业生产现状进行分析,为企业后续发展提供支撑。
-
-