-
公开(公告)号:CN108037919A
公开(公告)日:2018-05-15
申请号:CN201711246865.6
申请日:2017-12-01
Applicant: 北京博宇通达科技有限公司
Abstract: 本公开公开了一种基于WEB的可视化大数据工作流配置方法及系统,通过浏览器使用拖拽的方式和向导界面实现工作流配置,提升开发效率,降低人员成本。同时,提供完善的MapReduce/Hive/Spark支持,当前主流的大数据处理程序为HiveSQL、MapReduce、Spark、SparkSQL,本公开试图对上述大数据分布式处理程序提供完善的支持。进一步的,本公开的方案能够提升运行速度,实现为轻量级的分布式工作流引擎,提升分布式程序的调度、运行速度,提升系统性能。
-
公开(公告)号:CN108182053A
公开(公告)日:2018-06-19
申请号:CN201711297398.X
申请日:2017-12-08
Applicant: 北京云星宇交通科技股份有限公司 , 北京博宇通达科技有限公司
Abstract: 本发明提供一种开发运行大数据业务应用程序的系统和方法,所述系统包括:数据处理流程定制单元,其用于根据大数据业务应用的需求,按照数据处理流程的每个节点的可定制的流程项对数据处理流程进行配置以生成数据业务应用程序;数据业务应用程序提交单元,其用于将数据处理流程定制单元生成的数据业务应用程序上传至大数据集群,使用大数据集群提供的运行功能启动所述数据业务应用程序;数据业务应用程序监控单元,其用于在大数据集群运行数据业务应用程序过程中,监控所述数据业务应用程序的运行情况,并及时回馈给用户。
-
公开(公告)号:CN106648672A
公开(公告)日:2017-05-10
申请号:CN201611232140.7
申请日:2016-12-28
Applicant: 北京云星宇交通科技股份有限公司 , 北京博宇通达科技有限公司
CPC classification number: G06F8/20 , G06F8/31 , G06Q10/103
Abstract: 本发明涉及一种大数据开发与运行方法及系统,其中的方法包括:扩展大数据计算处理流程,形成大数据处理流程的集成环境;基于所述集成环境,获取用户定制的大数据处理流程;上传所述定制的大数据处理流程,调度运行所述上传的大数据处理流程,并显示运行结果。其抽象了大数据应用开发的流程,将大数据应用开发流程集成在一起,方便用户自行定制大数据处理流程,提高了工作效率,达到降低大数据应用门槛、降低生产成本的目标。
-
-