一种数据表的分区管理方法及装置

    公开(公告)号:CN106716400B

    公开(公告)日:2019-09-27

    申请号:CN201580001180.8

    申请日:2015-06-26

    Inventor: 刘哲 沈柯 王铁英

    Abstract: 一种数据表的分区管理方法及装置,包括:确定表组中每个数据表的类型以及关联键,所述数据表的类型包括一维维度表、多维维度表或事实表(S301);根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区(S302)。针对不同类型以及不同维度的数据表采用不同的分区管理方法,从而在一个系统里高效的实现OLTP和OLAP的数据处理机制,节省了资源消耗。

    分布式存储系统、集群节点及其区间管理方法

    公开(公告)号:CN104283906A

    公开(公告)日:2015-01-14

    申请号:CN201310274957.0

    申请日:2013-07-02

    Inventor: 刘哲 沈柯

    Abstract: 一种分布式存储系统、集群节点及其区间管理方法,包括:集群节点按照配置参数将本地路由表中的第一路由表项对应的区间切分为至少两个子区间,其中第一路由表项是指副本信息中记录有表示该集群节点的信息的路由表项;集群节点为每个子区间分别创建一个日志队列;以及集群节点根据来自客户端的数据操作请求的关键字段确定对应的子区间,针对确定的子区间执行相应的数据读写操作,并据此更新与对应的日志队列。通过在集群节点上将一段连续的数据存储区间切分为至少两个子区间、并针对每个子区间创建并维护一个日志队列,使得集群节点上原来针对整段区间的串行操作变成分别针对至少两个子区间的并行操作,可以有效提高系统整体的吞吐量。

    一种数据表的分区管理方法及装置

    公开(公告)号:CN106716400A

    公开(公告)日:2017-05-24

    申请号:CN201580001180.8

    申请日:2015-06-26

    Inventor: 刘哲 沈柯 王铁英

    CPC classification number: G06F16/278 G06F16/221 G06F16/2282 G06F16/25

    Abstract: 一种数据表的分区管理方法及装置,包括:确定表组中每个数据表的类型以及关联键,所述数据表的类型包括一维维度表、多维维度表或事实表(S301);根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区(S302)。针对不同类型以及不同维度的数据表采用不同的分区管理方法,从而在一个系统里高效的实现OLTP和OLAP的数据处理机制,节省了资源消耗。

    一种分布式数据库中关联表分区的方法和设备

    公开(公告)号:CN106415534A

    公开(公告)日:2017-02-15

    申请号:CN201580001222.8

    申请日:2015-05-31

    Inventor: 王铁英 刘哲 沈柯

    Abstract: 本发明实施例公开了一种分布式数据库中关联表分区的方法,包括:在需要分区的各数据表中确定第一数据表,生成第一数据表的共址分区CP表集合,第一数据表的CP表集合包括第一数据表和第一数据表的至少一个CP表,其中,第一数据表的CP表为分区键是第一数据表的分区键的子集的数据表,将第一数据表按照分区键进行Partition,并将CP表集合中第一数据表的每个CP表进行分区,每个CP表与第一数据表相关联的分区键的分区范围与第一数据表中相对应的分区键的分区范围相同。从而使得进行OLAP操作时,只需要本节点或者从其他节点获得关联的相同Range的数据,而不需要获得整张的事实表,从而提升了整个系统的性能。

    数据同步方法、数据同步装置及分布式系统

    公开(公告)号:CN104243527A

    公开(公告)日:2014-12-24

    申请号:CN201310246590.1

    申请日:2013-06-20

    Inventor: 沈柯

    Abstract: 本发明公开了一种数据同步方法、数据同步装置及分布式系统,管理节点获取指示对所述第一数据中心和所述第二数据中心的路由信息进行更新的路由更新消息,其中,所述路由信息中至少包含所述第一数据中心和所述第二数据中心的标识信息以及所述第一数据中心和所述第二数据中心中各节点的备份路由信息;所述管理节点根据所述路由更新消息,调整所述第一数据中心和所述第二数据中心的路由信息;所述管理节点将调整后的所述第一数据中心和所述第二数据中心的路由信息同步到所述第一数据中心和所述第二数据中心中,以使所述第一数据中心和所述第二数据中心基于所述调整后的路由信息,对管辖的各个节点的数据进行同步传输。

    一种分布式数据库中关联表分区的方法和设备

    公开(公告)号:CN106415534B

    公开(公告)日:2019-09-20

    申请号:CN201580001222.8

    申请日:2015-05-31

    Inventor: 王铁英 刘哲 沈柯

    Abstract: 本发明实施例公开了一种分布式数据库中关联表分区的方法,包括:在需要分区的各数据表中确定第一数据表,生成第一数据表的共址分区CP表集合,第一数据表的CP表集合包括第一数据表和第一数据表的至少一个CP表,其中,第一数据表的CP表为分区键是第一数据表的分区键的子集的数据表,将第一数据表按照分区键进行Partition,并将CP表集合中第一数据表的每个CP表进行分区,每个CP表与第一数据表相关联的分区键的分区范围与第一数据表中相对应的分区键的分区范围相同。从而使得进行OLAP操作时,只需要本节点或者从其他节点获得关联的相同Range的数据,而不需要获得整张的事实表,从而提升了整个系统的性能。

    数据同步方法、数据同步装置及分布式系统

    公开(公告)号:CN104243527B

    公开(公告)日:2018-08-21

    申请号:CN201310246590.1

    申请日:2013-06-20

    Inventor: 沈柯

    Abstract: 本发明公开了一种数据同步方法、数据同步装置及分布式系统,管理节点获取指示对所述第一数据中心和所述第二数据中心的路由信息进行更新的路由更新消息,其中,所述路由信息中至少包含所述第一数据中心和所述第二数据中心的标识信息以及所述第一数据中心和所述第二数据中心中各节点的备份路由信息;所述管理节点根据所述路由更新消息,调整所述第一数据中心和所述第二数据中心的路由信息;所述管理节点将调整后的所述第一数据中心和所述第二数据中心的路由信息同步到所述第一数据中心和所述第二数据中心中,以使所述第一数据中心和所述第二数据中心基于所述调整后的路由信息,对管辖的各个节点的数据进行同步传输。

    分布式存储系统、集群节点及其区间管理方法

    公开(公告)号:CN104283906B

    公开(公告)日:2018-06-19

    申请号:CN201310274957.0

    申请日:2013-07-02

    Inventor: 刘哲 沈柯

    Abstract: 一种分布式存储系统、集群节点及其区间管理方法,包括:集群节点按照配置参数将本地路由表中的第一路由表项对应的区间切分为至少两个子区间,其中第一路由表项是指副本信息中记录有表示该集群节点的信息的路由表项;集群节点为每个子区间分别创建一个日志队列;以及集群节点根据来自客户端的数据操作请求的关键字段确定对应的子区间,针对确定的子区间执行相应的数据读写操作,并据此更新与对应的日志队列。通过在集群节点上将一段连续的数据存储区间切分为至少两个子区间、并针对每个子区间创建并维护一个日志队列,使得集群节点上原来针对整段区间的串行操作变成分别针对至少两个子区间的并行操作,可以有效提高系统整体的吞吐量。

Patent Agency Ranking