Invention Publication
- Patent Title: 一种分布式大数据组件统一服务引擎设计方法
-
Application No.: CN202310219911.2Application Date: 2023-03-09
-
Publication No.: CN116610375APublication Date: 2023-08-18
- Inventor: 杨娟 , 杨再飞 , 翟士丹 , 高亮
- Applicant: 北京海致星图科技有限公司
- Applicant Address: 北京市海淀区学院路甲5号2幢平房B-1031室
- Assignee: 北京海致星图科技有限公司
- Current Assignee: 北京海致星图科技有限公司
- Current Assignee Address: 北京市海淀区学院路甲5号2幢平房B-1031室
- Agency: 北京科家知识产权代理事务所
- Agent 赵莹子
- Main IPC: G06F9/445
- IPC: G06F9/445 ; G06F9/455

Abstract:
本发明提供了一种分布式大数据组件统一服务引擎设计方法、设备和计算机可读存储介质,方法包括如下步骤:根据大数据计算框架spark/flink的特点,在系统中以jonName‑plugins‑module的组织方式来引用相关业务开发的源码包和配置文件以及启动脚本,不依赖其他jar包,提供大数据计算引擎中核心的计算引擎层;对具有相同特点的计算框架按照上述步骤进行添加,并通过前缀进行区分。本发明提供的分布式大数据组件统一服务引擎设计方法、设备和计算机可读存储介质,通过大数据计算框架组织和对外开放服务接口的方式整合大数据生态组件和计算,降低了开发难度、使用开销,提升了工作效率。
Information query