文献类型：期刊文章

作　　者：雷鸣[1]

LEI Ming(Tianjin Meteorological Information Center,Tianjin 300074,China)

机构地区：[1]天津市气象信息中心,天津300074

出　　处：《计算机技术与发展》

基　　金：国家自然科学基金项目(41575156);天津市气象局科研项目(201914ybxm12)。

年　　份：2021

卷　　号：31

期　　号：5

起止页码：193-197

语　　种：中文

收录情况：JST、RCCSE、ZGKJHX、普通刊

摘　　要：随着气象数据种类、数量日益繁多,范围尺度越来越大,在海量气象数据场景下,无论传统数据库还是文件系统技术的查询和存储方式都不能很好地满足气象数据的高性能查询要求。基于大数据技术,以关系型数据存储、分布式NoSQL数据库存储、网格存储系统和分布式NAS存储相结合的混合云存储架构为基础,搭建了统一数据集、处理和服务的省局气象数据中心,有效实现了数据的共享,流程的高度集约,并利用全国气象MUSIC接口进行统一的对外数据服务。实验表明,该方案不但能够有效与旧有CIMISS存储系统无缝衔接,做到应用与数据分离,使用户对后台数据源的变动零感知,而且查询性能得到了较大提高,与传统存储相比,结构化数据的查询性能提升7.6倍以上,且随时间增长,优势会更加明显,非结构化数据的查询性能则提升了5倍多。

关 键 词：大数据 分布式数据库 CIMISS  NAS 文件存储  

分 类 号：TP399]