文献类型：期刊文章

作　　者：张宏海[1,2] 刘亚宁[1,2]

ZHANG Honghai;LIU Yaning

机构地区：[1]中国民航信息网络股份有限公司,北京101318 [2]民航旅客服务智能化应用技术重点实验室,北京101318

出　　处：《信息技术与信息化》

年　　份：2022

期　　号：6

起止页码：87-90

语　　种：中文

收录情况：普通刊

摘　　要：随着业务增长,服务器端的机器数量也在不断扩张,对于集群日志进行实时的采集和分析就变得越来越复杂,业界出现了许多基于日志数据处理的平台,但目前使用最广泛的是ELK平台。基于开源的ELK(elasticsearch、logstash和kibana)作为系统框架,实现了一种分布式日志采集与分析系统,完成对服务器产生的海量日志进行数据收集、处理、查询和可视化的构建。系统分为四个部分,包括数据收集、数据处理、数据存储以及数据展示,系统中每个部分都具备横向扩展的能力,具备高可用的机制,可以根据不同的维度和条件实现近实时的高效数据查询和检索。

关 键 词：日志文件 日志数据收集  日志数据分析  日志数据处理  ELK平台  

分 类 号：TP311.13]