一种基于工作流的通用ETL工具的过程模型生成方法

    公开(公告)号:CN107391611B

    公开(公告)日:2019-11-12

    申请号:CN201710536250.0

    申请日:2017-07-04

    Abstract: 本发明公开了一种基于工作流的通用ETL工具的过程模型生成方法,在ETL概念模型的基础上进行抽象,完成整个ETL的控制以及任务的定时执行和调度,建立基于工作流的ETL模型,在此基础上构建ETL流程的有向图,通过集成变换、分解、合并、串行化、并行化、添加还原点、分流和复制八种State变换方式,使得ETL过程在经过恰当的变换之后,变成一个执行效率更高的新ETL过程。基于工作流的ETL系统的概念模型,不同于传统的ETL模型,它屏蔽了底层的具体数据抽取、转换和加载步骤,当业务发生改变时,用户只需要修改ETL流程图即可。大大提高了开发效率,减少开发成本,真正的实现了数据仓库和数据集成平民化。

    一种基于工作流的通用ETL工具的过程模型生成方法

    公开(公告)号:CN107391611A

    公开(公告)日:2017-11-24

    申请号:CN201710536250.0

    申请日:2017-07-04

    Abstract: 本发明公开了一种基于工作流的通用ETL工具的过程模型生成方法,在ETL概念模型的基础上进行抽象,完成整个ETL的控制以及任务的定时执行和调度,建立基于工作流的ETL模型,在此基础上构建ETL流程的有向图,通过集成变换、分解、合并、串行化、并行化、添加还原点、分流和复制八种State变换方式,使得ETL过程在经过恰当的变换之后,变成一个执行效率更高的新ETL过程。基于工作流的ETL系统的概念模型,不同于传统的ETL模型,它屏蔽了底层的具体数据抽取、转换和加载步骤,当业务发生改变时,用户只需要修改ETL流程图即可。大大提高了开发效率,减少开发成本,真正的实现了数据仓库和数据集成平民化。

    基于IEC61968消息的数据质量检测方法

    公开(公告)号:CN105956107B

    公开(公告)日:2019-04-16

    申请号:CN201610289813.6

    申请日:2016-05-04

    Abstract: 本发明公开了一种基于IEC61968消息的数据质量检测方法,包括:数据质量服务系统将IEC61968和IEC61970模型文件中的设备对象形成CIM/OWL本体对象并装载到本体内存库中;数据质量服务系统将数据质量检验规则装载到规则内存库中;数据质量服务系统通过服务接口接收配电自动化信息交互数据;数据质量服务系统将接收到的配电自动化信息交互数据根据业务规则和本体模型进行分步检验;数据质量服务系统形成检验结果并将结果反馈给各业务系统。本发明提供以服务方式对数据质量检测的自动化方法和数据质量检测效率的方法,从而大大提高了配电自动化交换总线数据交互效率,能够提高交互业务系统的数据质量。

Patent Agency Ranking