一种基于数据湖的数据管理系统及方法

    公开(公告)号:CN112307122B

    公开(公告)日:2023-06-02

    申请号:CN202011193306.5

    申请日:2020-10-30

    Abstract: 本发明实施例提供了一种基于数据湖的数据管理系统及方法,涉及大数据技术领域。该系统包括:多个计算引擎、多个数据源以及虚拟引擎装置;每个计算引擎,用于向虚拟引擎装置发送数据访问请求和待访问的数据源的标识信息,并接收虚拟引擎装置反馈的与数据访问请求对应的响应结果;虚拟引擎装置,用于向具有标识信息的数据源发送数据访问请求;以及,将具有标识信息的数据源反馈的响应结果,反馈至发出数据访问请求的计算引擎;每个数据源,用于确定数据访问请求对应的响应结果,并将所确定的响应结果反馈给虚拟引擎装置。与现有技术相比,应用本发明实施例提供的方案,可以实现减少基于数据湖的数据管理系统构建过程中的重复开发工作。

    一种基于数据湖的数据管理系统及方法

    公开(公告)号:CN112307122A

    公开(公告)日:2021-02-02

    申请号:CN202011193306.5

    申请日:2020-10-30

    Abstract: 本发明实施例提供了一种基于数据湖的数据管理系统及方法,涉及大数据技术领域。该系统包括:多个计算引擎、多个数据源以及虚拟引擎装置;每个计算引擎,用于向虚拟引擎装置发送数据访问请求和待访问的数据源的标识信息,并接收虚拟引擎装置反馈的与数据访问请求对应的响应结果;虚拟引擎装置,用于向具有标识信息的数据源发送数据访问请求;以及,将具有标识信息的数据源反馈的响应结果,反馈至发出数据访问请求的计算引擎;每个数据源,用于确定数据访问请求对应的响应结果,并将所确定的响应结果反馈给虚拟引擎装置。与现有技术相比,应用本发明实施例提供的方案,可以实现减少基于数据湖的数据管理系统构建过程中的重复开发工作。

Patent Agency Ranking