-
公开(公告)号:CN102236581A
公开(公告)日:2011-11-09
申请号:CN201010171637.9
申请日:2010-04-30
Applicant: 国际商业机器公司
CPC classification number: G06F9/52 , G06F8/71 , G06F9/4812 , G06F9/4843 , G06F9/5005 , G06F9/5066 , G06F17/30 , G06F17/30194 , G06F17/3023 , G06F17/40
Abstract: 公开了一种用于数据中心的映射化简方法,包括:响应于作业服务器所分配的映射任务,映射任务服务器执行映射任务以生成具有版本信息的映射输出结果,存储所生成的映射输出结果,并向作业服务器通知映射输出结果的相关信息;响应于作业服务器所分配的化简任务,化简任务服务器从映射任务服务器获取具有指定版本信息的键值名的映射输出结果,其中所获取的映射输出结果包括具有指定版本信息的映射输出结果以及具有指定版本信息之前的版本信息的历史映射输出结果,并对所获取的映射输出结果执行化简任务。此外还公开了由化简任务服务器执行的数据化简的方法以及相应的映射化简系统和化简任务服务器。
-
公开(公告)号:CN102209087B
公开(公告)日:2014-07-09
申请号:CN201010138992.6
申请日:2010-03-31
Applicant: 国际商业机器公司
IPC: H04L29/08
CPC classification number: H04L47/70 , G06F9/5066 , G06F17/30445 , H04L67/1097
Abstract: 本发明公开一种在具有存储网络(SAN)的数据中心进行MapReduce数据传输的方法,该数据中心包括部署有作业服务器、Map任务服务器和Reduce任务服务器的多台服务器,该方法包括:响应于接收到作业服务器分配的Map任务,Map任务服务器执行Map任务并产生Map任务输出结果;Map任务服务器将Map任务输出结果写入存储网络;以及响应于接收到作业服务器分配的Reduce任务,Reduce任务服务器从存储网络读取Map任务输出结果。
-
公开(公告)号:CN102236581B
公开(公告)日:2013-08-14
申请号:CN201010171637.9
申请日:2010-04-30
Applicant: 国际商业机器公司
CPC classification number: G06F9/52 , G06F8/71 , G06F9/4812 , G06F9/4843 , G06F9/5005 , G06F9/5066 , G06F17/30 , G06F17/30194 , G06F17/3023 , G06F17/40
Abstract: 公开了一种用于数据中心的映射化简方法,包括:响应于作业服务器所分配的映射任务,映射任务服务器执行映射任务以生成具有版本信息的映射输出结果,存储所生成的映射输出结果,并向作业服务器通知映射输出结果的相关信息;响应于作业服务器所分配的化简任务,化简任务服务器从映射任务服务器获取具有指定版本信息的键值名的映射输出结果,其中所获取的映射输出结果包括具有指定版本信息的映射输出结果以及具有指定版本信息之前的版本信息的历史映射输出结果,并对所获取的映射输出结果执行化简任务。此外还公开了由化简任务服务器执行的数据化简的方法以及相应的映射化简系统和化简任务服务器。
-
公开(公告)号:CN102209087A
公开(公告)日:2011-10-05
申请号:CN201010138992.6
申请日:2010-03-31
Applicant: 国际商业机器公司
IPC: H04L29/08
CPC classification number: H04L47/70 , G06F9/5066 , G06F17/30445 , H04L67/1097
Abstract: 本发明公开一种在具有存储网络(SAN)的数据中心进行MapReduce数据传输的方法,该数据中心包括部署有作业服务器、Map任务服务器和Reduce任务服务器的多台服务器,该方法包括:响应于接收到作业服务器分配的Map任务,Map任务服务器执行Map任务并产生Map任务输出结果;Map任务服务器将Map任务输出结果写入存储网络;以及响应于接收到作业服务器分配的Reduce任务,Reduce任务服务器从存储网络读取Map任务输出结果。
-
-
-