摘要
为解决当前气象信息网络数据监控系统中存在的一些问题,提高网络数据监控效率,设计实现了一种基于大数据分析的气象信息网络数据监控系统。通过对网络数据流量进行实时采集,利用Spark分布式处理技术对采集到的数据进行实时处理,并将处理后的结果存入到HDFS数据库中,利用Hadoop中的HDFS和MapReduce两种分布式计算框架完成对气象信息网络中服务器、路由器、交换机等设备的运行状态实时监测。实验结果表明,该系统能够完成对气象信息网络中各设备的运行状态实时监测,并且能够准确定位故障设备和故障原因,提高了网络数据监控的效率和准确率。
出处
《长江信息通信》
2023年第12期125-127,共3页
Changjiang Information & Communications