一种NCO气象数据结构化存储方法和装置
摘要:
本发明提供一种NCO气象数据结构化存储方法和装置,先将本地文件系统中的NCO气象数据上传至分布式文件系统HDFS,然后对HDFS中的NCO气象数据进行解析,并将解析得到的结构化气象数据保存至HDFS,最后根据结构化气象数据的应用场景将HDFS中的结构化气象数据存储至相应的关系型数据库,实现NCO气象数据的解析和结构化存储。本发明提供的技术方案基于Hadoop的可靠、高效和可伸缩性,并通过Sqoop、MapReduce和Hive等技术一气呵成地实现NCO气象数据的迁移、解析和结构化存储,实现过程简单明了,避免了代码复杂和编程繁琐等问题。
公开/授权文献
0/0