-
公开(公告)号:CN115221155A
公开(公告)日:2022-10-21
申请号:CN202110410435.3
申请日:2021-04-16
Applicant: 中国移动通信集团辽宁有限公司 , 中国移动通信集团有限公司
IPC: G06F16/22 , G06F16/23 , G06F16/2455 , G06K9/62
Abstract: 本申请公开了一种数据分片方法、装置、电子设备和存储介质。该方法包括:获取初始哈希环上的多个待存储数据;对各待存储数据进行聚类,得到各待存储数据的目标聚类结果;对于每个目标聚类结果,计算目标聚类结果中各特征向量的均值;针对各目标聚类结果,基于均值,以及目标聚类结果的预设权重,确定各待存储数据的资源占用指标;基于各待存储数据的资源占用指标,更新初始哈希环上各待存储数据的存储位置。采用本申请的数据分片方法,可实现将数据均衡的分配到每个数据存储节点,保证每个数据存储节点的系统资源相对均衡,解决传统算法在数据分片过程中数据移动量过大、评估维度单一造成数据倾斜的问题,从而提升数据分片效率及系统性能。
-
公开(公告)号:CN115221200A
公开(公告)日:2022-10-21
申请号:CN202110414547.6
申请日:2021-04-16
Applicant: 中国移动通信集团辽宁有限公司 , 中国移动通信集团有限公司
IPC: G06F16/2455 , G06F16/2457
Abstract: 本申请公开了一种数据查询方法、装置、电子设备和存储介质。该方法包括:基于客户端发送的数据查询请求,依次在一级缓存数据库、二级缓存数据库和预设缓存数据库中查询待查询数据;在一级缓存数据库、二级缓存数据库和预设缓存数据库中任意一个数据库查询到待查询数据的情况下,将待查询数据反馈至客户端;其中,一级缓存数据库中的第一待缓存数据为第一预设时间段内访问次数大于或等于预设访问次数的数据;二级缓存数据库中的第二待缓存数据为第二预设时间段内访问次数大于或等于预设访问次数的数据,第二预设时间段大于第一预设时间段;预设缓存数据库中的缓存数据为第三待缓存数据。采用本申请的数据查询方法,可以提高待查询数据的命中率。
-