-
公开(公告)号:CN113760681A
公开(公告)日:2021-12-07
申请号:CN202110260430.7
申请日:2021-03-10
Applicant: 中科天玑数据科技股份有限公司
IPC: G06F11/34 , G06F16/22 , G06F16/242 , G06F16/248
Abstract: 本发明公开了一种基于统一SQL的多源异构数据质量校验方法和系统,根据本发明的一个方面包括以下步骤:S1、创建质量校验规则;S2、创建质量校验任务;S3、创建质量检验作业;S4、创建质量校验调度计划;S5、提交调度计划执行校验逻辑;S6、质量报告生成;根据本发明的另一个方面包括任务作业配置模块、作业调度模块、校验执行模块、数据质量报告生成与数据质量分析模块。本发明的有益效果为:可以对不同存储形式的数据进行直观、灵活、统一的质量管理,同时也能满足复杂的业务需求。
-
公开(公告)号:CN112130851A
公开(公告)日:2020-12-25
申请号:CN202010772703.1
申请日:2020-08-04
Applicant: 中科天玑数据科技股份有限公司
Abstract: 本发明提供了一种用于人工智能的建模方法,包括以下步骤:模型初始化:接收新建模块组件指令或编辑模块组件指令,生成菜单组件和视图组件;算子组件构建:接收选择算子标识的指令;接收复制指令;接收生成位置指令;在所述位置建立算子组件,所述算子组件抽取算子标识携带的信息;连线构建:判断连线输出节点,判断连线输入节点,在连线输出节点和连线输入节点之间构建有向连线;运行验证:接收运行指令,将数据沿有向连线在算子组件之间进行传递,将正在执行的算子组件进行突出显示,在算子组件上显示运行结果。本发明还提供了一种电子设备、存储介质,将创建模型的过程可视化,便于查看模型的结构、数据流向、执行、运行结果。
-
公开(公告)号:CN112130813A
公开(公告)日:2020-12-25
申请号:CN202010772721.X
申请日:2020-08-04
Applicant: 中科天玑数据科技股份有限公司
IPC: G06F8/20
Abstract: 本发明保护一种面向大数据分析的多用户协同建模方法、系统及设备,包括以下步骤:获取数据信息,根据所述数据信息构建当前任务分析流程,所述当前任务分析流程包括普通节点和超级节点,所述超级节点能够进行参数输入和输出;接收第一操作指令,确定协同用户,将所述当前任务分析流程对所述协同用户进行共享和分配;接收所述协同用户对所述任务分析流程的第二操作指令,生成最终任务分析流程;接收第三操作指令,运行最终任务分析流程。所述超级节点的设置解决了数据分析应用构建中各个环节相互依赖、无法并行处理的技术问题,产生了各类角色充分发挥各自最大优势、构建效率高的技术效果。
-
公开(公告)号:CN108090222B
公开(公告)日:2020-07-07
申请号:CN201810011460.2
申请日:2018-01-05
Applicant: 中国科学院计算技术研究所 , 中科天玑数据科技股份有限公司
IPC: G06F16/27
Abstract: 本发明公开了一种数据库集群节点间数据同步系统,涉及数据处理领域。所述系统包括配置单元、元数据存储单元、元数据判断单元、读写判断单元、Paxos同步单元、日志存储单元和日志重现单元。本发明解决了现有数据库同步方法中异步方式可能导致数据库集群数据不一致的问题,也解决了同步方式可能因为某个节点阻塞导致性能低下的问题;最后,本发明所述数据库集群节点间数据同步系统也支持不同方向的数据同步,没有只能将数据从主数据库同步到从数据库的限制。
-
公开(公告)号:CN108090222A
公开(公告)日:2018-05-29
申请号:CN201810011460.2
申请日:2018-01-05
Applicant: 中国科学院计算技术研究所 , 中科天玑数据科技股份有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库集群节点间数据同步系统,涉及数据处理领域。所述系统包括配置单元、元数据存储单元、元数据判断单元、读写判断单元、Paxos同步单元、日志存储单元和日志重现单元。本发明解决了现有数据库同步方法中异步方式可能导致数据库集群数据不一致的问题,也解决了同步方式可能因为某个节点阻塞导致性能低下的问题;最后,本发明所述数据库集群节点间数据同步系统也支持不同方向的数据同步,没有只能将数据从主数据库同步到从数据库的限制。
-
-
-
-