气象大数据分布式存储设计与实现

雷鸣

首页> 中文期刊> 《计算机技术与发展》 >气象大数据分布式存储设计与实现

气象大数据分布式存储设计与实现

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

随着气象数据种类、数量日益繁多,范围尺度越来越大,在海量气象数据场景下,无论传统数据库还是文件系统技术的查询和存储方式都不能很好地满足气象数据的高性能查询要求.基于大数据技术,以关系型数据存储、分布式NoSQL数据库存储、网格存储系统和分布式NAS存储相结合的混合云存储架构为基础,搭建了统一数据集、处理和服务的省局气象数据中心,有效实现了数据的共享,流程的高度集约,并利用全国气象MUSIC接口进行统一的对外数据服务.实验表明,该方案不但能够有效与旧有CIMISS存储系统无缝衔接,做到应用与数据分离,使用户对后台数据源的变动零感知,而且查询性能得到了较大提高,与传统存储相比,结构化数据的查询性能提升7.6倍以上,且随时间增长,优势会更加明显,非结构化数据的查询性能则提升了5倍多.

著录项

来源
《计算机技术与发展》 |2021年第5期|193-197|共5页
作者
雷鸣;
展开▼
作者单位

天津市气象信息中心天津 300074;

展开▼
原文格式 PDF
正文语种 chi
中图分类在其他方面的应用;
关键词
大数据; 分布式数据库; CIMISS; NAS; 文件存储;

相似文献

中文文献
外文文献
专利

1. NVMe在气象大数据分布式存储中的研究与应用 [J] . 陈旭辉 ,刘洋 ,高鹏 . 气象水文海洋仪器 . 2021,第004期
2. 公安交通管理大数据分布式存储设计与实现 [J] . 邵志骅 ,崔林山 . 道路交通科学技术 . 2015,第004期
3. 云计算环境下山东省气象大数据云平台的设计与实现 [J] . 冯勇 ,李微 ,朱辉 . 信息技术与信息化 . 2021,第005期
4. 基于大数据的湖北气象业务内网设计与实现 [J] . 张冰松 ,汪璠 ,王雅新 . 数字技术与应用 . 2020,第010期
5. 基于分布式的农业气象大数据平台设计与实现 [J] . 朱亮 ,钟艳雯 ,贺炜 . 湖北农业科学 . 2019,第006期
6. 浅析面向大数据的分布式存储技术的发展与应用 [C] . 杨震乾 ,杨泳丹 . 2016年云南电力技术论坛 . 2016
7. 设备运行状态大数据建模及分布式存储研究 [A] . 徐博远 . 2018

气象大数据分布式存储设计与实现

摘要

著录项

相似文献

相关主题

期刊订阅