支持高速加载的海量结构化数据存储、查询方法和系统

    公开(公告)号:CN102521405B

    公开(公告)日:2014-06-25

    申请号:CN201110441775.9

    申请日:2011-12-26

    Abstract: 本发明提供一种支持高速加载的海量结构化数据存储、查询方法和系统。其中海量结构化数据的分布式存储方法包括:从用户端接收高速加载的数据;以及利用双滑动窗口结构,将加载的数据进行分布式缓存,并在固定周期之后将缓存的数据进行分布式存储。通过本发明的海量结构化数据分布式存储方法,能够实现对新加载数据的缓存,从而在后期查询数据时能够提高流数据这种对近期加载数据使用频率高的应用下的查询效率。

    一种双机热备份方法及系统

    公开(公告)号:CN102118309A

    公开(公告)日:2011-07-06

    申请号:CN201010620086.X

    申请日:2010-12-31

    Abstract: 本发明公开了一种双机热备份方法和系统。所述方法,采用时效输出缓存与集线器配合,在正常情况下,主用机接收集线器发送的数据包、并进行处理以及回注过程;备用机处于standby状态,缓存集线器首次广播的数据包;同时当收到主用机回注的数据包时,缓存命中成功,缓存删除;在主用机工作正常但数据包回注异常情况下,主用机流量回注失败,备用机的缓存仅仅缓存了集线器首次广播的数据包,时效输出缓存通过线程轮询的策略回注此数据包,保证网络应用处理丢包率为零;在主用机工作异常情况下,备用机实时检测到主用机失败,备用机完成切换过程,备用机接替主用机继续工作。

    一种利用组通信系统进行数据库复制的方法和中间件

    公开(公告)号:CN100377156C

    公开(公告)日:2008-03-26

    申请号:CN200510055215.4

    申请日:2005-03-16

    Abstract: 本发明公开了一种组通信系统中利用中间件进行数据库复制的方法和中间件,用于多个数据库存储节点上之间数据库的复制,以保证各个节点上数据库的一致性。该方法包括本地事务执行步骤、事务广播步骤、事务排序步骤、乱序判断步骤、定序事务执行步骤和数据库写回步骤。该中间件包括与前述方法中各步骤对应的模块。本发明在进行数据库复制时以事务为单位对数据库节点进行广播,大大降低了系统的通信开销,提高了事务的响应时间,而且能够保证不同节点上数据库的严格一致性。

    海量结构化数据复杂查询任务的分布式查询方法和系统

    公开(公告)号:CN102521406A

    公开(公告)日:2012-06-27

    申请号:CN201110442091.0

    申请日:2011-12-26

    Abstract: 本发明提供一种海量结构化数据复杂查询任务的分布式查询方法和系统。其中海量结构化数据的分布式查询方法包括:接收用户发出的查询任务并将查询任务分解为多个查询子任务;以及根据该多个查询子任务中的每个查询子任务,对分布式存储的数据并发执行分批次查询,并分布式返回查询到的结果集。本发明采用的分批次查询并保持中间结果状态的查询方法,充分考虑了界面展示应用中小数据量快速查询的需求,同时也兼顾了统计、分析背景下的大结果集的统计需求。

    一种非对称路由下单向流URI的关联技术系统及其方法

    公开(公告)号:CN102035725A

    公开(公告)日:2011-04-27

    申请号:CN201010249706.3

    申请日:2010-08-10

    Abstract: 本发明提供一种非对称路由下单向流的唯一资源标注(URI)的查找与关联方法,其中网络包括多个对等的网关节点(A,B,C,D),其上运行基于内容扫描的网络安全系统,还包括一台中心调度节点(S),其上运行URI关联中心调度系统,用于调度各网关节点来解决URL关联问题。所述多个网关节点(A,B,C,D)之间是对等关系,任一网关节点均可作为URI查询请求网关节点,发起URI查询请求给中心调度节点(S);也可作为URI查询应答网关节点来处理URI查询请求,搜索本地URI散列表,将相关联的URI返回给中心调度节点(S)。本发明通过中心调度器来收集查询请求消息,并定时批量地将查询请求消息扩散到其他节点上,从而提高URI查询的效率,降低了网关节点策略实现的逻辑复杂性。

    组通信系统中利用中间件进行数据库复制的方法和中间件

    公开(公告)号:CN1831810A

    公开(公告)日:2006-09-13

    申请号:CN200510055215.4

    申请日:2005-03-16

    Abstract: 本发明公开了一种组通信系统中利用中间件进行数据库复制的方法和中间件,用于多个数据库存储节点上之间数据库的复制,以保证各个节点上数据库的一致性。该方法包括本地事务执行步骤、事务广播步骤、事务排序步骤、乱序判断步骤、定序事务执行步骤和数据库写回步骤。该中间件包括与前述方法中各步骤对应的模块。本发明在进行数据库复制时以事务为单位对数据库节点进行广播,大大降低了系统的通信开销,提高了事务的响应时间,而且能够保证不同节点上数据库的严格一致性。

    海量结构化数据复杂查询任务的分布式查询方法和系统

    公开(公告)号:CN102521406B

    公开(公告)日:2014-06-25

    申请号:CN201110442091.0

    申请日:2011-12-26

    Abstract: 本发明提供一种海量结构化数据复杂查询任务的分布式查询方法和系统。其中海量结构化数据的分布式查询方法包括:接收用户发出的查询任务并将查询任务分解为多个查询子任务;以及根据该多个查询子任务中的每个查询子任务,对分布式存储的数据并发执行分批次查询,并分布式返回查询到的结果集。本发明采用的分批次查询并保持中间结果状态的查询方法,充分考虑了界面展示应用中小数据量快速查询的需求,同时也兼顾了统计、分析背景下的大结果集的统计需求。

    支持高速加载的海量结构化数据存储、查询方法和系统

    公开(公告)号:CN102521405A

    公开(公告)日:2012-06-27

    申请号:CN201110441775.9

    申请日:2011-12-26

    Abstract: 本发明提供一种支持高速加载的海量结构化数据存储、查询方法和系统。其中海量结构化数据的分布式存储方法包括:从用户端接收高速加载的数据;以及利用双滑动窗口结构,将加载的数据进行分布式缓存,并在固定周期之后将缓存的数据进行分布式存储。通过本发明的海量结构化数据分布式存储方法,能够实现对新加载数据的缓存,从而在后期查询数据时能够提高流数据这种对近期加载数据使用频率高的应用下的查询效率。

Patent Agency Ranking