-
公开(公告)号:CN113986927A
公开(公告)日:2022-01-28
申请号:CN202111274388.0
申请日:2021-10-29
申请人: 中国联合网络通信集团有限公司 , 中讯邮电咨询设计院有限公司
IPC分类号: G06F16/22
摘要: 本申请提供一种数据入库方法、装置、设备及存储介质。该方法包括:获取缓存区域的待入库数据表的数据类型,根据待入库数据表的数据类型确定待入库数据表在预设数据库对应的存储区域;获取存储区域的schema对应的数据表的表结构信息及待入库数据表的表结构信息;确定待入库数据表的表结构信息是否与schema对应的数据表的表结构信息匹配;若否,则调整schema对应的数据表的表结构信息,将待入库数据表对应的数据存储至调整后的schema对应的数据表中。本申请的方法,调整schema对应的数据表的表结构信息,使存储区域的数据表的表结构与入库数据表的表结构一致,无需用户手动修改,有效提高入库效率,节约入库时间。
-
公开(公告)号:CN117459483A
公开(公告)日:2024-01-26
申请号:CN202311386024.0
申请日:2023-10-24
申请人: 中国联合网络通信集团有限公司 , 中讯邮电咨询设计院有限公司
IPC分类号: H04L49/9057
摘要: 本申请提供一种高并发流数据乱序处理方法、装置、设备及存储介质,通过获取各数据源的流数据,对流数据进行预处理,获得统一数据格式的多个单元数据;从所述单元数据中选定该单元数据对应的关键词,基于预设的分组参数,根据所述关键词将单元数据分至若干个排序组;对于每个所述排序组,在预设的时长窗口内,基于单元数据的时间戳,按照单元数据进入到该排序组的顺序计算该排序组的水位,并采用二叉树对各单元数据进行缓存,将所述二叉树中存储的时间戳小于该排序组的水位的单元数据作为输出数据;将输出数据按照预设写入规则写入至输出目标,通过预设时长窗口,利用水位算法和二叉树完成对任意数据任意字段的实时排序,避免数据处理混乱。
-
公开(公告)号:CN114007234B
公开(公告)日:2023-05-09
申请号:CN202111276707.1
申请日:2021-10-29
申请人: 中国联合网络通信集团有限公司 , 中讯邮电咨询设计院有限公司
摘要: 本申请提供一种网络性能监控方法、装置、设备及存储介质,该方法包括:接收用户触发的网络性能监控请求,网络性能监控请求中包括待监控的目标网络性能指标;根据网络性能监控请求,实时获取与网络性能相关的源数据;获取与目标网络性能指标匹配的数据处理策略;按照数据处理策略对所述源数据进行流式处理,以实时获得目标网络性能指标的数值;将目标网络性能指标的数值进行实时发布,以实现对网络性能的监控。本申请提供的网络性能监控方法,能够满足对网络性能的实时监控。当确定网络性能不能满足要求时,可根据实时获得目标网络性能指标的数值对网络性能进行相应调整,有效提高对网络性能进行调整的效率。
-
公开(公告)号:CN114007234A
公开(公告)日:2022-02-01
申请号:CN202111276707.1
申请日:2021-10-29
申请人: 中国联合网络通信集团有限公司 , 中讯邮电咨询设计院有限公司
摘要: 本申请提供一种网络性能监控方法、装置、设备及存储介质,该方法包括:接收用户触发的网络性能监控请求,网络性能监控请求中包括待监控的目标网络性能指标;根据网络性能监控请求,实时获取与网络性能相关的源数据;获取与目标网络性能指标匹配的数据处理策略;按照数据处理策略对所述源数据进行流式处理,以实时获得目标网络性能指标的数值;将目标网络性能指标的数值进行实时发布,以实现对网络性能的监控。本申请提供的网络性能监控方法,能够满足对网络性能的实时监控。当确定网络性能不能满足要求时,可根据实时获得目标网络性能指标的数值对网络性能进行相应调整,有效提高对网络性能进行调整的效率。
-
-
-