-
公开(公告)号:CN107544999B
公开(公告)日:2022-10-21
申请号:CN201610487175.9
申请日:2016-06-28
Applicant: 百度在线网络技术(北京)有限公司
Abstract: 本发明公开了一种用于检索系统的同步装置及同步方法、检索系统及方法。检索系统包括同步节点和集群节点,同步节点独立于集群节点且包括一个或多个同步装置,该同步装置包括:至少一个同步触发器,用于在监测到满足同步触发条件时,产生包含待同步数据的数据标识信息的同步触发指示;数据抓取器,用于根据同步触发指示从对应的数据源抓取与所述数据标识信息对应的数据并传输给转储器;转储器,用于将所抓取的数据转储至集群节点中的对应数据表中,集群节点用于存储数据表并提供检索服务。本发明在升级或数据转移时,不需要重启集群节点,满足实际检索需求,提升了检索效率,具有高可用和高并发的特点。
-
公开(公告)号:CN107544999A
公开(公告)日:2018-01-05
申请号:CN201610487175.9
申请日:2016-06-28
Applicant: 百度在线网络技术(北京)有限公司
Abstract: 本发明公开了一种用于检索系统的同步装置及同步方法、检索系统及方法。检索系统包括同步节点和集群节点,同步节点独立于集群节点且包括一个或多个同步装置,该同步装置包括:至少一个同步触发器,用于在监测到满足同步触发条件时,产生包含待同步数据的数据标识信息的同步触发指示;数据抓取器,用于根据同步触发指示从对应的数据源抓取与所述数据标识信息对应的数据并传输给转储器;转储器,用于将所抓取的数据转储至集群节点中的对应数据表中,集群节点用于存储数据表并提供检索服务。本发明在升级或数据转移时,不需要重启集群节点,满足实际检索需求,提升了检索效率,具有高可用和高并发的特点。
-