一种大数据环境下的指标计算方法

    公开(公告)号:CN108268639A

    公开(公告)日:2018-07-10

    申请号:CN201810048169.2

    申请日:2018-01-18

    Inventor: 尹学渊 蒋自国

    CPC classification number: G06F17/30303 G06F17/30365 G06F17/30383

    Abstract: 本发明公开了一种大数据环境下的指标计算方法,包括以下步骤:从数据存储服务器读取数据;对数据进行清洗;执行SparkSQL,进行中间表计算;通过执行预先写好的SparkSQL,计算游戏指标;判断计算时间是否为当天,如是当天,则停止计算,如不是当天,则继续计算下一天的指标。本发明通过SparkSQL功能,将指标计算的逻辑完全写在sql中,并将sql写入数据库,新增一个指标,只需要几条sql就能达到目的,基本上实现了零代码增加需求;在指标计算完之后,通过提取公共字段,达到压缩指标数据的目的,同时也提高了指标查询速度,本方法可以广泛应用于带有简单统计数据功能的系统中。

    存储系统去重复
    2.
    发明公开

    公开(公告)号:CN108228096A

    公开(公告)日:2018-06-29

    申请号:CN201711394826.0

    申请日:2017-12-21

    Abstract: 本发明涉及存储系统去重复。示例存储系统可包括存储介质和存储控制器。存储控制器可建立虚拟卷、私人数据存储区和去重复数据存储区,各自是存储介质的虚拟存储空间,其中每个私人数据存储区与一个虚拟卷相关联并且去重复数据存储区由虚拟卷共享。响应于接收待存储在给定的一个虚拟卷的输入数据,存储控制器可确定输入数据的签名,并且在将输入数据存储在与给定的一个虚拟卷相关联的私人数据存储区中和将输入数据存储在去重复数据存储区中之间进行选择,基于:由签名的第一部分寻址的元数据存储位置是否包括有效的元数据,并且,如果包括:元数据是否包括指向虚拟卷中的一个虚拟卷的后向指针,以及签名的第二部分是否与元数据中包括的密钥匹配。

    删除多级存储架构中的记录

    公开(公告)号:CN103377290B

    公开(公告)日:2018-06-08

    申请号:CN201310156109.X

    申请日:2013-04-28

    Abstract: 公开了从第二级存储或主存储中删除数据记录。执行对第一级存储中的数据记录的查找,其中该数据记录由行标识符定义。如果在第一级存储中发现该行标识符,则执行在第二级存储和主存储中对代表该数据记录的更新的更新的行标识符的查找,数据记录的更新由更新的行标识符定义。如果在第二级存储中发现该更新的行标识符,则从第一级存储生成撤销日志,以使所述更新的行标识符无效。生成代表无效的更新的行标识符的标记,而且生成重做日志以便在第一级存储中重新存储该数据记录。

    一种基于字段数据和坐标共性合并不同行业数据的方法

    公开(公告)号:CN107967313A

    公开(公告)日:2018-04-27

    申请号:CN201711164685.3

    申请日:2017-11-21

    CPC classification number: G06F17/30303 G06F17/30241 G06F17/30542

    Abstract: 本发明公开了一种基于字段数据和坐标共性合并不同行业数据的方法,涉及环境污染源普查技术领域。该方法,基于一定业务规则,从多部门多行业提供的数据库中筛选出与环境污染相关的企业名单,并赋予空间属性,通过地址码补全与校验、自动匹配、智能筛选、人工筛选等步骤,合并不同行业企业数据,从而解决不同行业多种数据源的融合匹配问题。为第二次污染源普查提供精准的普查数据库,同时也为多来源的不同行业企业数据融合和匹配提供典型示范案例,为环境管理提供更精准的污染源清单,以实现更精准的环境管理决策。

    一种数据质量稽查管理系统

    公开(公告)号:CN107958049A

    公开(公告)日:2018-04-24

    申请号:CN201711212498.8

    申请日:2017-11-28

    CPC classification number: G06F17/30303

    Abstract: 本发明公开了一种数据质量稽查管理系统,涉及数据管理及应用技术领域。该系统,可以对数据在计划、获取、处理、存储、共享、维护、应用、消亡生命周期的每个阶段中可能引发的各类数据质量问题,进行识别、度量、监控、预警等一系列管理活动,实现了数据质量的全局掌控,同时可以快速连接数据源,提供多种数据质量稽查规则,并以多种可视化方式提供数据质量报告,对数据进行持续监控和改善质量问题。并通过改善和提高组织的管理水平进一步提高数据质量,随着系统的使用,在及时发现问题、解决问题的基础上,提供了一个行之有效的方法和技术基础,可以帮助政府部门和IT部门的相关人士开展协作,确保所有数据的完整、一致、准确和最新。

    用于检测数据源中的偏差的方法、设备和计算机程序

    公开(公告)号:CN104756113B

    公开(公告)日:2018-04-20

    申请号:CN201380057211.2

    申请日:2013-09-05

    Abstract: 本公开描述了用于检测数据源中的偏差的方法和设备,每一个数据源包括多个数据公布,每一个数据公布包括多个数据值。该方法包括:标识(102)数据公布对,每一对包括第一数据源中的第一数据公布和第二数据源中的第二数据公布,其中,针对数据公布对中的第一数据公布和第二数据公布的唯一匹配数据属性,数据值的子集相等。该方法还包括:确定(104)多个数据公布对中的每一个数据公布对中的第一数据公布的数据值和第二数据公布的数据值的多个组合中的个体组合是否满足多个关系模式算法中的个体关系模式算法,以及确定(106)针对多个数据公布对所确定的关系模式算法的满足的符合性水平。该方法还包括:基于所确定的符合性水平,从多个关系模式算法中选择(108)关系模式算法,以及关于所选择的关系模式算法分析(110)个体数据公布对的数据值组合,以检测个体数据公布对中不符合所选择的关系模式算法的数据值组合,不符合指示(114)个体数据公布对的数据的可能偏差。

    一种面对智能下肢假肢的人体运动意图预知识别方法

    公开(公告)号:CN107918492A

    公开(公告)日:2018-04-17

    申请号:CN201711404559.0

    申请日:2017-12-22

    Abstract: 本发明公开了一种基于智能下肢假肢的人体运动意图识别方法,本发明解决了传统人体运动意图识别方法具有滞后性的问题,在佩戴假肢的患侧的运动模式转换之前,根据嵌入假肢或绑定在健侧的传感器产生的时序数据,对残疾人患者的运动意图进行准确地识别,并且,相比于传统意图识别方法中所用到的多种传感器,本发明只用了一种传感器,即惯性传感器,就能够准确的识别人体运动意图。本发明包括以下步骤:意图识别数据采集及数据库建立;意图识别数据预处理;意图识别数据特征提取;分类模型选择与模型训练和完成意图识别。本发明为智能下肢假肢的运动意图识别方法提供实验数据何识别方法,以此推动智能假肢的发展,更好地服务于下肢截肢患者。

Patent Agency Ranking