-
公开(公告)号:CN104935523A
公开(公告)日:2015-09-23
申请号:CN201410108066.2
申请日:2014-03-21
Applicant: 中国移动通信集团公司
IPC: H04L12/803 , H04W28/08
Abstract: 本发明公开了一种负载均衡的处理方法和设备,包括:获取一个工作节点的一个迭代周期内每一个任务的运行时间信息;根据获取的每一个任务的运行时间信息以及待迁移任务的分析策略,确定工作节点在迭代周期内的待迁移任务;当确定为待迁移任务的次数超过设定数值时,将待迁移任务迁移至除了所述工作节点之外的任务处理量小于设定阈值的工作节点,这样利用任务迁移方式,在工作点的多次迭代操作中执行一次任务迁移,有效地实现工作点间任务负载均衡,避免了Giraph中负载均衡策略存在时间消耗的问题,同时也避免了Hadoop中推测式执行策略存在增加消息通信网络开销的问题,提高了BSP模型中任务迁移的效率,提升了系统的负载均衡性。
-
公开(公告)号:CN104754647A
公开(公告)日:2015-07-01
申请号:CN201310743398.3
申请日:2013-12-29
Applicant: 中国移动通信集团公司
IPC: H04W28/08
CPC classification number: H04W28/08
Abstract: 本发明公开了一种负载迁移的方法和设备,包括:接收目标处理器发送的用于表征需要从源处理器中迁移待处理的任务的迁移请求信息,根据接收到的迁移请求消息中包含的目标处理器的标识信息,确定由源处理器和目标处理器协商的、用于放置源处理器中任务的描述符地址信息的中间表,根据所述迁移请求信息中包含了需要迁移待处理的任务的容量信息,确定待迁移的任务的描述符地址信息;并将确定的所述描述符地址信息写入确定的中间表中,以便于目标处理器从中间表中获取描述符地址信息,并根据描述符地址信息得到待迁移的任务,完成负载的迁移,通过引入中间表,将目前采用的基于自选锁的有锁负载均衡优化成无锁负载均衡,有效地提升了系统的整体性能。
-
公开(公告)号:CN104572255A
公开(公告)日:2015-04-29
申请号:CN201310468511.1
申请日:2013-10-09
Applicant: 中国移动通信集团公司
Abstract: 本发明公开了一种多层应用托管方法,装置及系统,包括:虚拟机上的节点管理代理通过与管理中心服务器之间的信息交互,在该虚拟机上安装将要托管的多层应用包括的各服务实例,该虚拟机由该管理中心服务器在物理节点上创建,该节点管理代理通过按照从该管理中心服务器获取的所述各服务实例之间的关系,对该虚拟机上安装的各服务实例进行配置,在该虚拟机上创建所述多层应用。采用本发明实施例提供的方案,相比现有技术,提高了在虚拟机上创建将要托管应用的成功率。
-
公开(公告)号:CN103902544A
公开(公告)日:2014-07-02
申请号:CN201210571950.0
申请日:2012-12-25
Applicant: 中国移动通信集团公司
IPC: G06F17/30
CPC classification number: G06F17/30315 , G06F17/30486
Abstract: 本发明提供了一种数据处理方法及系统,这种方法可以将大规模数据按照多个列分割成更细粒度的多维数据块,从而在针对数据查询时仅处理少数相关的数据块。本发明中的数据块是包括所有数据列(可不包含分区列)的数据块,这和现有的列数据库、列族数据库均不相同。这样在输出较多列时,可以获得更好的数据扫描性能。
-
公开(公告)号:CN102117305B
公开(公告)日:2013-09-11
申请号:CN201010000163.1
申请日:2010-01-06
Applicant: 中国移动通信集团公司
IPC: G06F17/30
Abstract: 本发明公开了查询数据的系统、方法和数据管理系统。所述查询数据的系统包括:存储媒介,存储有多个数据、以及为所述多个数据创建并与之绑定的次索引;索引元数据管理模块,用于管理从存储于数据库的基表数据中获取索引元数据,其中,所述索引元数据用于根据预定规则创建所述多个数据;以及索引数据管理模块,用于根据从用户端接收的操作指令,通过绑定的所述次索引在所述存储媒介中查询到要操作的数据。
-
公开(公告)号:CN103188161A
公开(公告)日:2013-07-03
申请号:CN201110453878.7
申请日:2011-12-30
Applicant: 中国移动通信集团公司
IPC: H04L12/803 , H04L29/08 , H04L12/24
Abstract: 本发明公开了一种分布式数据加载调度的方法及系统,其中,该方法包括:控制节点实时收集源加载节点和目的加载节点的运行状态信息;控制节点根据运行状态信息,生成配置更新信息下发给源加载节点和目的加载节点;其中,控制节点位于分布式系统中。本发明的分布式数据加载调度方法和系统,采用动态拓扑生成和自动调度方法,由于采用灵活的配置更新策略,保证了系统的负载均衡和高可靠性,提高了系统吞吐率,提高了数据加载的效率。
-
公开(公告)号:CN103138981A
公开(公告)日:2013-06-05
申请号:CN201110391293.7
申请日:2011-11-30
Applicant: 中国移动通信集团公司
IPC: H04L12/24
Abstract: 本发明公开了一种社交网络分析方法和装置。其中该方法包括:根据社交网络文件生成针对每个节点的节点信息;控制所述社交网络中所有节点根据相应的节点信息进行遍历,遍历所述社交网络所有节点后,得到所述社交网络的拓扑特征值。本发明通过采用多个节点同时并发的机制,即所有节点都并行推送遍历信息,解决了社交网络中需要多次迭代才能遍历完数据的问题,降低了分析的时间复杂度,提高分析效率。
-
公开(公告)号:CN103092886A
公开(公告)日:2013-05-08
申请号:CN201110347659.0
申请日:2011-11-07
Applicant: 中国移动通信集团公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据查询操作的实现方法、装置及系统,对外部数据系统的数据表执行查询操作后,将查询到的数据缓存到临时表中;对临时表中缓存的数据增加索引后,将临时表中的所有数据均匀分配给各数据交换节点,确定其对应的索引范围。本发明通过建立临时表缓存查询到的数据,各个数据交换节点就可以直接并行地对缓存表中的部分数据进行读取操作,避免了每个数据交换节点都需要并行地在外部系统中进行复杂的查询操作,减轻了在处理大量数据时外部数据系统服务器的负担,并且,由于分配给各数据交换节点的临时表中的索引范围对应的数据行数相对平均,保证了各个数据交换节点在并行处理时运行时间能够基本相同,从而提高了整体的查询效率。
-
公开(公告)号:CN102033870B
公开(公告)日:2013-04-24
申请号:CN200910092777.4
申请日:2009-09-24
Applicant: 中国移动通信集团公司
IPC: G06F17/30
Abstract: 本发明实施例提供一种数据查找方法及装置,用以解决采用现有技术提供的数据查找方式的查找效率比较低的问题。其中,本发明实施例提供的该方法包括步骤:数据查找装置获得用户提供的数据查找条件;根据所述数据查找条件,按照预设的行关键字所在范围的确定方式,确定用户需要查找的数据在数据存储系统中所在行对应的行关键字所在范围;所述数据查找装置根据所述确定的范围,从预先按照预设的行关键字确定方式确定的、与数据存储系统中各行数据分别对应的行关键字中,确定处于所述确定的范围内的行关键字;所述数据查找装置根据所述确定的行关键字,查找与所述确定的行关键字对应的行中的数据。
-
公开(公告)号:CN102541460A
公开(公告)日:2012-07-04
申请号:CN201010613959.4
申请日:2010-12-20
Applicant: 中国移动通信集团公司
IPC: G06F3/06
Abstract: 本发明实施例公开了一种多磁盘场景下的磁盘管理方法和设备,通过应用本发明实施例所提出的技术方案,在进行磁盘选择时,针对每个任务,不仅考虑各磁盘的剩余空间,还进一步考虑各磁盘的性能信息,为各磁盘确定综合的优先级参数,并根据该优先级参数为该任务进行磁盘选择,从而,可以更加高效合理的进行磁盘管理,实现发挥磁盘的性能。
-
-
-
-
-
-
-
-
-