期刊文章详细信息
基于ELK和Spark Streaming的日志分析系统设计与实现
Design and Implementation of Log Analysis System Based on ELK and Spark Streaming
文献类型：期刊文章
机构地区：[1]杭州华三通信技术有限公司北京研究所,北京100085
年 份：2015
卷 号：2
期 号：6
起止页码：674-678
语 种：中文
收录情况：普通刊
摘 要：在大数据时代,对数据平台各组件的运行状态实时监控与运行分析具有重要意义,实现该目的需要符合企业自身应用场景的日志处理解决方案。本文基于业界主流的开源日志解决方案ELK Stack,探讨该方案中各组件的主要功能和工作原理,以及其在解析数据库日志中的使用方法,并将该方案与分布式消息队列Kafka整合以保证数据可靠性,与Spark流数据处理框架Spark Streaming整合以实现实时告警。为数据平台的运维监控工作提供参考。
关 键 词：ELK SPARK Kafka 日志分析
分 类 号：TP311.52]
参考文献：
正在载入数据...
二级参考文献：
正在载入数据...
耦合文献：
正在载入数据...
引证文献：
正在载入数据...
二级引证文献：
正在载入数据...
同被引文献：
正在载入数据...
