首页 期刊 中低纬山地气象 Storm流式技术在地面气象数据处理中的应用 【正文】

Storm流式技术在地面气象数据处理中的应用

作者:廖婷婷; 王彪; 肖卫青; 李从英; 郭茜 贵州省气象信息中心; 贵州贵阳550002; 国家气象信息中心; 北京100081
地面气象数据   海量数据   storm流式技术   高效处理  

摘要:地面自动站气象数据的量级、观测传输频次日益增长,传输方式从传统的文本方式发展到消息传输,对数据处理时效有了更高的要求。该文提出采用Storm流式技术进行地面自动站气象数据的解码和入库,使用Spout节点连接外部数据源,将数据转化为Tuple,传递给解码Bolt、入库Bolt和DI/EI消息Bolt,分别进行实时的入库和监控,且达到灵活调整系统资源的目的。该应用与传统的简约流程对比,稳定性、处理效率、拓展性都有了显著提高。

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

学术咨询 免费咨询 杂志订阅