一种动态OID推送数据采集方法及装置

    公开(公告)号:CN111209405A

    公开(公告)日:2020-05-29

    申请号:CN202010319483.7

    申请日:2020-04-22

    Abstract: 本发明公开了一种动态OID推送数据采集方法及装置,基于SNMP OID数据采集管理系统,现有方案依靠手动配置OID信息进行数据的采集,一方面会加重用户的工作量,配置易出错;另一方面不够灵活,不能根据系统实际运行情况进行动态OID推荐,易出现对系统监控不完善,监控行为刻板的缺点。本方案根据每次请求的OID返回的数据集进行建模、消除人工干预,同时根据模型预测出相关联的OID进行OID动态推送,弥补了单纯使用手动进行配置OID的缺陷;本方案是构建智能运维分析系统必不可少的环节之一。

    一种基于时序数据的统计指标存储方法及装置

    公开(公告)号:CN111209285A

    公开(公告)日:2020-05-29

    申请号:CN202010324453.5

    申请日:2020-04-23

    Abstract: 本发明公开了一种基于时序数据的统计指标存储方法及装置,在将时序数据写入时序数据库的同时计算时序数据的统计指标,将时序数据的统计指标计算结果写入KV引擎。本方案会在时序数据入库时提前计算所有统计指标,并把统计指标按照时序来进行入库存储,每次查询指标不必再读取原始时序数据,能够大大提升时序数据统计指标的查询,减少计算资源的消耗。解决了现有时序数据进行统计指标计算时需要大量的读I/O去读取原始数据,消耗系统资源且没有对统计数据的进行有效管理和保存,每次都需要重新去读取原始数据来计算的问题。

    一种基于区块链技术的数据安全传输方法及系统

    公开(公告)号:CN111130752A

    公开(公告)日:2020-05-08

    申请号:CN201911181174.1

    申请日:2019-11-27

    Abstract: 本发明公开了一种基于区块链技术的数据安全传输方法及系统,本产品主要采用区块链技术实现数据的安全共享交换,将初始资源数据进行上链,另外在共享交换过程中将上链资源的区块密文值作为标签进行记录。以输入输出的交易形式记录输入的资源的密文和输出资源的密文。如果输入输出的资源的密文相同,则说明数据未被修改,若不同,则说明数据在该方流转过程中已被修改。解决了在数据传输过程中或共享交换需要经过多层审批、多方流转的时候,数据资源前后一致性出现问题时,无法明确确认数据资源在哪一流传过程中出现问题,造成数据安全隐患的责任方难以明确的问题。

    一种基于Spark的小文件合并方法及系统

    公开(公告)号:CN111008235A

    公开(公告)日:2020-04-14

    申请号:CN201911216907.0

    申请日:2019-12-03

    Abstract: 本发明公开了一种基于Spark的小文件合并方法及系统,本方案通过定时合并小文件任务,根据任务规则将多个分区中的多个文件合并成1个文件,降低小文件散落数量,当查询Hive库中数据时能降低磁盘读取负荷,网络传输消耗,数据合并等过程提升数据查询效率。解决了现有方案对源数据库中的数据抽取到Hive库中,Spark同时多个任务同时读取源数据库数据,并将数据写入到不同分区中导致的磁盘读取倍增、数据查询性能就会下降的问题。

    一种预训练模型知识图谱实体关系抽取方法及装置

    公开(公告)号:CN110825890A

    公开(公告)日:2020-02-21

    申请号:CN202010029435.4

    申请日:2020-01-13

    Abstract: 本发明公开了一种预训练模型知识图谱实体关系抽取方法及装置,基于蚁群算法,蚁群算法的基本原理可以概括为以下步骤:1、蚂蚁在觅食的路径上会分泌一种信息素,能被后面的蚂蚁识别;2、在碰到还未走过的路时会随机选择路走,同时在新的路径也释放信息素;3、路径越长信息素的浓度就会越低,后面的蚂蚁在分叉路口时会选择信息素浓度最高的一条路;4、因此如此循环下去,最优路径上的信息素浓度会越来越高;5、最终蚁群找到最优的觅食途径。本方案基于上述思路通过建立指针路径模型来进行实体关系抽取。解决了现有的实体关系抽取算法采用的机制较为复杂,在进行训练时,计算量较大,计算周期较长,且无法进行并行训练的问题。

    一种海量数据聚类分析方法及装置

    公开(公告)号:CN110717086A

    公开(公告)日:2020-01-21

    申请号:CN201911270066.1

    申请日:2019-12-12

    Abstract: 本发明公开了一种海量数据聚类分析方法及装置,本发明的目的在于实现一种基于并行计算的DBSCAN算法,解决传统密度聚类算法无法进行海量数据分析的问题。该发明提出了高效的交叠分区和类簇合并策略,能够快速的进行数据拆分和类簇合并,并且该方法充分考虑了负载均衡,可以在分布式框架下实现高效运算,从而支持海量数据的聚类,高效地解决了传统DBSCAN无法进行海量数据分析的问题,因此该方法具有较高的性能和实用价值。

    基于区块链的大数据存储方法及装置

    公开(公告)号:CN109617964A

    公开(公告)日:2019-04-12

    申请号:CN201811521943.3

    申请日:2018-12-12

    Abstract: 本发明实施例涉及数据存储技术领域,具体而言,涉及一种基于区块链的大数据存储方法及装置,该方法能够根据区块的存储容量将待存储大数据“拆分”为第一上链数据和第一非上链数据,当第一上链数据的第一数据容量满足存储容量要求时,对第一上链数据和第一非上链数据进行加密,并将第一上链数据存储至区块,如此,能够实现大数据在区块链中的存储,改善了大数据上链存储的限制。

Patent Agency Ranking