- 专利标题: 基于Elastic Search的关系型数据库的数据管理方法和设备
-
申请号: CN202311742355.3申请日: 2023-12-18
-
公开(公告)号: CN117555949A公开(公告)日: 2024-02-13
- 发明人: 秦浩翔 , 何义赟 , 单永梅 , 樊华 , 夏靖 , 程飞 , 马俊 , 高章健 , 张驰 , 孟元 , 曹余 , 钱立鹏 , 李柏霖 , 王佳佳 , 孙永 , 郝井勋 , 朱林超 , 黄山晖 , 吴衍涛
- 申请人: 安徽南瑞中天电力电子有限公司
- 申请人地址: 安徽省合肥市高新区创新大道2800号合肥创新产业园二期G1楼
- 专利权人: 安徽南瑞中天电力电子有限公司
- 当前专利权人: 安徽南瑞中天电力电子有限公司
- 当前专利权人地址: 安徽省合肥市高新区创新大道2800号合肥创新产业园二期G1楼
- 代理机构: 合肥市泽信专利代理事务所
- 代理商 潘飞
- 主分类号: G06F16/2458
- IPC分类号: G06F16/2458 ; G06F16/2455 ; G06F16/27 ; G06F16/28 ; G06F16/22 ; G06F40/289
摘要:
本发明属于大数据领域,具体涉及一种基于Elastic Search的关系型数据库的数据管理方法及其对应的数据管理设备。该管理方法可以提供的基础服务包括数据全量同步、增量同步,以及分布式的数据检索服务。该方案基Elastic Search组件、Redis组件、Kafka组件,将多个关系型数据库的基础档案同步到Elastic Search,并提供对应分布式快速检索和缓存功能。在全量同步时,本发明先创建索引数据集,再对其进行注解和补充,通过流式读取数据,最后利用生产者消费者模型读写数据。增量同步借助Kafka实现,检索服务提供了对查询结果按照策略进行缓存的功能。本发明提升了系统性能和稳定性,满足了用户对数据检索效率、速率以及分析功能方面的需求。