公开(公告)号：CN109684319B

公开(公告)日：2021-06-04

申请号：CN201811587767.3

申请日：2018-12-25

Applicant: 北京小米移动软件有限公司

Inventor： 曹连超 ,  王斌 ,  湛然 ,  刘喜文 ,  周加智 ,  祁宏伟

IPC: G06F16/215

Abstract: 本公开是关于一种数据清洗系统、方法、装置及存储介质，所述系统包括：数据清洗组件库、数据清洗规则库、规则解析器和执行器。规则解析器用于从数据清洗组件库中选取与目标数据清洗任务相关的k个组件，从数据清洗规则库中获取k个组件各自对应的规则文本，根据k个组件各自对应的规则文本，生成总规则文本，解析总规则文本，得到目标数据清洗任务对应的配置信息，将配置信息发送给执行器。执行器用于根据配置信息，调用k个组件，通过k个组件执行目标数据清洗任务。本公开通过预先配置的不同组件来执行数据处理任务，而不必在接收到数据处理任务时，临时编写用于执行该数据处理任务的逻辑代码，从而提高了数据处理任务的执行效率。

公开(公告)号：CN109684319A

公开(公告)日：2019-04-26

申请号：CN201811587767.3

申请日：2018-12-25

Applicant: 北京小米移动软件有限公司

Inventor： 曹连超 ,  王斌 ,  湛然 ,  刘喜文 ,  周加智 ,  祁宏伟

IPC: G06F16/215

Abstract: 本公开是关于一种数据清洗系统、方法、装置及存储介质，所述系统包括：数据清洗组件库、数据清洗规则库、规则解析器和执行器。规则解析器用于从数据清洗组件库中选取与目标数据清洗任务相关的k个组件，从数据清洗规则库中获取k个组件各自对应的规则文本，根据k个组件各自对应的规则文本，生成总规则文本，解析总规则文本，得到目标数据清洗任务对应的配置信息，将配置信息发送给执行器。执行器用于根据配置信息，调用k个组件，通过k个组件执行目标数据清洗任务。本公开通过预先配置的不同组件来执行数据处理任务，而不必在接收到数据处理任务时，临时编写用于执行该数据处理任务的逻辑代码，从而提高了数据处理任务的执行效率。

公开(公告)号：CN109656979A

公开(公告)日：2019-04-19

申请号：CN201811581893.8

申请日：2018-12-24

Applicant: 北京小米移动软件有限公司

Inventor： 王斌 ,  刘喜文 ,  曹连超 ,  祁宏伟 ,  湛然 ,  周加智

IPC: G06F16/2458 ,  G06F16/248

Abstract: 本公开是关于一种数据统计分析方法、装置及存储介质，属于大数据技术领域。所述方法包括：根据预配置的打点信息，获取打点信息对应的打点数据；其中，打点信息用于指示所需收集的数据；从打点数据中提取出统计分析所需的n个数据项，n为正整数；根据预配置的图表配置信息，生成n个数据项对应的统计分析图表；其中，图表配置信息用于指示统计分析图表的内容和样式。本公开通过预配置打点信息可以灵活选择所需采集的打点数据，通过预配置图表配置信息可以灵活确定所要生成的统计分析图表的内容和样式，从而使得整个数据统计分析过程从数据打点到图表生成均灵活可控，充分满足多样化的数据统计分析需求。

公开(公告)号：CN109656979B

公开(公告)日：2021-05-04

申请号：CN201811581893.8

申请日：2018-12-24

Applicant: 北京小米移动软件有限公司

Inventor： 王斌 ,  刘喜文 ,  曹连超 ,  祁宏伟 ,  湛然 ,  周加智

IPC: G06F16/2458 ,  G06F16/248

Abstract: 本公开是关于一种数据统计分析方法、装置及存储介质，属于大数据技术领域。所述方法包括：根据预配置的打点信息，获取打点信息对应的打点数据；其中，打点信息用于指示所需收集的数据；从打点数据中提取出统计分析所需的n个数据项，n为正整数；根据预配置的图表配置信息，生成n个数据项对应的统计分析图表；其中，图表配置信息用于指示统计分析图表的内容和样式。本公开通过预配置打点信息可以灵活选择所需采集的打点数据，通过预配置图表配置信息可以灵活确定所要生成的统计分析图表的内容和样式，从而使得整个数据统计分析过程从数据打点到图表生成均灵活可控，充分满足多样化的数据统计分析需求。