-
公开(公告)号:CN119621777A
公开(公告)日:2025-03-14
申请号:CN202411706764.2
申请日:2024-11-26
Applicant: 南京大学 , 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司 , 中国移动通信集团江苏有限公司
IPC: G06F16/2455 , G06F16/22
Abstract: 本发明公开了一种自适应的范围查询过滤方法、系统、设备及存储介质。所述方法包括:将输入数据集中的每个键切分为前缀和后缀,并将前缀相同的键划分到同一分区,每个分区包括前缀、后缀个数和按升序排列的后缀数组;构建自适应范围过滤器,构建过程以分区为单位进行编码,前缀插入到布谷鸟过滤器,后缀个数插入到桥结构,后缀数组根据稀疏程度连续紧凑存储,并进行压缩处理;根据查询的范围,将左右边界切分为两个前缀‑后缀对,根据前缀快速定位到相应的分区,在该分区的后缀数组中执行范围查询,返回符合条件的后缀。本发明通过键的切分和特定编码方式实现了一种基于指纹的自适应的范围查询过滤器,能够自适应应对倾斜工作负载,提高查询性能。
-
公开(公告)号:CN117493400B
公开(公告)日:2024-04-09
申请号:CN202410001639.5
申请日:2024-01-02
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/2455 , G06N3/0442 , G06N3/08
Abstract: 本申请公开了一种数据处理方法、装置及电子设备,涉及数据库技术领域。方法包括:将内存空间划分为热区和温区;基于标签信息,将数据进行区分得到温区数据和热区数据;标签信息中包含用于表示当前数据所在区域的指示字段;获取内存空间的当前使用内存量;基于当前使用内存量,对热区数据进行淘汰和/或对温区数据进行驱逐。本申请将内存空间进行划分层级,在两空间采用不同的淘汰算法,根据内存量实现对热区数据转温处理以及对温区数据的驱逐,并通过修改标签信息实现温热区的数据转化。从而有效解决了一些场景下的局限性问题,如周期性循环数据访问导致的冷数据进入非淘汰区和由于突发性的数据访问或其他原因导致的热数据被淘汰的问题。
-
公开(公告)号:CN116775691A
公开(公告)日:2023-09-19
申请号:CN202310063860.9
申请日:2023-01-12
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/2453 , G06F16/242 , G06F16/22 , G06N3/0464
Abstract: 本申请实施例公开了一种索引推荐方法、索引推荐装置、电子设备、芯片及计算机可读存储介质,其中,所述方法包括:构建DQN模型;所述DQN模型包括:第一通道和第二通道;基于数据库的工作负载的第一信息和第二信息对所述DQN模型进行训练;其中,所述工作负载包括多个历史查询语句;所述第一信息表征所述工作负载中的列选择度;所述第二信息表征所述工作负载的列查询种类;相应的,所述第一信息用于训练所述第一通道,所述第二信息用于训练所述第二通道;基于训练后的DQN模型进行索引推荐。
-
公开(公告)号:CN111797147B
公开(公告)日:2022-12-13
申请号:CN201910277565.7
申请日:2019-04-08
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/25 , G06F16/22 , G06F16/242 , G06F16/28
Abstract: 本申请公开一种数据处理方法及装置、电子设备,所述方法包括:接收第一Event,生成所述第一Event对应的Hive表;按照配置的SQL语句对所述Hive表中的数据进行处理,并基于处理结果输出第二Event;如此,可以简化Event的处理流程,避免大量中间对象的产生,降低了处理资源的消耗。
-
公开(公告)号:CN110457873B
公开(公告)日:2021-04-27
申请号:CN201810432660.5
申请日:2018-05-08
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本申请涉及版权保护技术领域,尤其涉及一种水印嵌入与检测方法及装置,用以解决目前的水印嵌入方法会增加水印的容量开销的问题;本申请实施例提供的水印嵌入方法包括:获取版权文件和版权人提供的版权信息,版权文件为各行内容之间不具有相互依赖关系的文本文件;基于版权信息和当前时间戳,生成待嵌入版权文件中的水印;将至少一份水印嵌入到版权文件中,其中,版权文件中任一行嵌入的为子水印,子水印是对所述水印进行分割得到的,且是根据该行的文本内容、哈希算法和子水印份数确定的;利用哈希算法确定版权文件中每一行文本内容对应的字符,根据各行文本内容对应的字符、水印对应的字符串和预设的水印隐藏规则,将水印信息隐藏在版权文件中。
-
公开(公告)号:CN110457873A
公开(公告)日:2019-11-15
申请号:CN201810432660.5
申请日:2018-05-08
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本申请涉及版权保护技术领域,尤其涉及一种水印嵌入与检测方法及装置,用以解决目前的水印嵌入方法会增加水印的容量开销的问题;本申请实施例提供的水印嵌入方法包括:获取版权文件和版权人提供的版权信息,版权文件为各行内容之间不具有相互依赖关系的文本文件;基于版权信息和当前时间戳,生成待嵌入版权文件中的水印;将至少一份水印嵌入到版权文件中,其中,版权文件中任一行嵌入的为子水印,子水印是对所述水印进行分割得到的,且是根据该行的文本内容、哈希算法和子水印份数确定的;利用哈希算法确定版权文件中每一行文本内容对应的字符,根据各行文本内容对应的字符、水印对应的字符串和预设的水印隐藏规则,将水印信息隐藏在版权文件中。
-
公开(公告)号:CN119961245A
公开(公告)日:2025-05-09
申请号:CN202412000486.5
申请日:2024-12-31
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本申请实施例公开了一种数据库集群的扩缩容方法、系统、设备、存储介质和计算机程序产品,该方法包括:获取待扩缩容的数据库集群针对不同类型的数据访问请求的响应时间信息;基于响应时间信息和数据访问请求的类型,确定针对数据库集群的扩缩容策略;基于扩缩容策略,对数据库集群进行扩缩容处理。如此,通过数据库集群针对不同类型的数据访问请求的响应时间信息和数据访问请求的类型确定数据库集群的扩缩容策略,实现了基于针对数据库集群的业务需求和数据库处理业务需要的情况自动触发数据库集群扩缩容的机制,提高了触发数据库集群扩缩容的智能性和数据库集群扩缩容的效率。
-
公开(公告)号:CN111159130A
公开(公告)日:2020-05-15
申请号:CN201811317734.7
申请日:2018-11-07
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/182 , G06F16/16
Abstract: 本发明公开了一种小文件合并方法及电子设备,用于提高系统文件的访问效率。其中的小文件合并方法包括:对分布式文件系统HDFS中的文件进行检索,获得多个小文件;从所述多个小文件中确定待合并的至少两个小文件;基于Spark的文件合并工具按照合并策略将所述待合并的至少两个小文件进行合并,其中,所述合并策略用于指示合并后的小文件的大小。
-
公开(公告)号:CN111159004A
公开(公告)日:2020-05-15
申请号:CN201811318559.3
申请日:2018-11-07
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F11/36
Abstract: 本发明涉及计算机应用技术领域,公开了一种Hadoop集群仿真测试方法、装置及存储介质,用于减少Hadoop测试集群调优的成本和周期,提高Hadoop生产集群运行速度和运行的稳定性,所述方法包括:获取Hadoop生产集群在实际运行中产生的资源使用状况信息和作业信息,并根据所述资源使用状况信息和作业信息,生成模拟Hadoop生产集群实际运行的作业的仿真作业,再运行所述仿真作业,并根据运行过程中的性能反馈,对Hadoop参数进行调优测试,最后根据调优测试结果,对所述Hadoop生产集群中的Hadoop参数进行调优。
-
公开(公告)号:CN110418285A
公开(公告)日:2019-11-05
申请号:CN201810386314.8
申请日:2018-04-26
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本申请涉及一种无线电地图的建立方法及装置,该方法包括:从现网信令平台中抽取各终端上报的采样点,每一采样点中包含有终端上报位置处的地理位置信息和周围小区的信号强度信息,从现网中获取与所述地理位置信息对应的基站工参表;针对所述采样点,根据基站工参表确定周围小区中至少两个小区的小区标识,所述至少两个小区中一个是为终端提供通信服务的主小区,其余小区是主小区的邻区,建立地理位置信息与所述至少两个小区中每一小区的小区标识和信号强度之间的对应关系,得到该采样点对应的位置指纹;根据各采样点对应的位置指纹确定初始的无线电地图Radio Map;针对后续获取到的终端上报的每一采样点,根据该采样点对应的位置指纹对Radio Map进行更新。
-
-
-
-
-
-
-
-
-