一种基于redis集群的海量数据关联方法
摘要:
本发明公开了一种基于redis集群的海量数据关联方法。本方法为:1)创建Redis内存数据库集群,采用内存数据库redis存储基础数据;其中,采用zset对关键字为IP地址、基础数据为IP地址段的数据进行存储,采用json格式以字符串形式对其他基础数据进行存储;2)在关联系统中配置一标准化关联策略文件;3)关联系统根据该标准化关联策略文件,从日志数据中挑选设定的关联字段形成关联key,然后根据该key值从内存数据库redis中关联出匹配的基础数据;4)关联系统根据该标准化关联策略文件中配置的回填字段信息,将关联出的基础数据填入该日志数据的对应字段。本发明方便数据的解析和关联、提升数据处理能力。
公开/授权文献
0/0