发明授权
- 专利标题: 一种NCO气象数据结构化存储方法和装置
-
申请号: CN201710806962.X申请日: 2017-09-08
-
公开(公告)号: CN107798059B公开(公告)日: 2023-05-26
- 发明人: 车建峰 , 王勃 , 冯双磊 , 刘纯 , 王伟胜 , 陈世涛 , 窦金利 , 杨红英 , 张菲 , 靳双龙 , 王铮 , 赵艳青 , 姜文玲 , 胡菊 , 马振强
- 申请人: 中国电力科学研究院 , 国家电网公司 , 广州泰迪智能科技有限公司 , 国网山东省电力公司青岛供电公司
- 申请人地址: 北京市海淀区清河小营东路15号; ; ;
- 专利权人: 中国电力科学研究院,国家电网公司,广州泰迪智能科技有限公司,国网山东省电力公司青岛供电公司
- 当前专利权人: 中国电力科学研究院,国家电网公司,广州泰迪智能科技有限公司,国网山东省电力公司青岛供电公司
- 当前专利权人地址: 北京市海淀区清河小营东路15号; ; ;
- 代理机构: 北京安博达知识产权代理有限公司
- 代理商 徐国文
- 主分类号: G06F16/25
- IPC分类号: G06F16/25 ; G06F16/28
摘要:
本发明提供一种NCO气象数据结构化存储方法和装置,先将本地文件系统中的NCO气象数据上传至分布式文件系统HDFS,然后对HDFS中的NCO气象数据进行解析,并将解析得到的结构化气象数据保存至HDFS,最后根据结构化气象数据的应用场景将HDFS中的结构化气象数据存储至相应的关系型数据库,实现NCO气象数据的解析和结构化存储。本发明提供的技术方案基于Hadoop的可靠、高效和可伸缩性,并通过Sqoop、MapReduce和Hive等技术一气呵成地实现NCO气象数据的迁移、解析和结构化存储,实现过程简单明了,避免了代码复杂和编程繁琐等问题。
公开/授权文献
- CN107798059A 一种NCO气象数据结构化存储方法和装置 公开/授权日:2018-03-13