一、 ELK日志分析系统
1、ELK的作用和特点
1) ELK的作用
集中化管理日志
2) ELK特点
集中化管理企业中服务器的日志信息
对采集的日志数据配置高可用
开源日志管理平台
对日志分析功能比较弱
2、ELK的组成
1) Elasticsearch
开源的分布式搜索日志引擎
集中化存储采集的日志信息
给客户端提供日志查询服务
零配置自动实现负载均衡
2) logstash
进行日志采集
安装在服务器上
将采集的日志信息上传到Elasticsearch服务器
3) kibana
图形化管理日志工具
支持浏览器访问ELK平台的日志信息
支持统计功能
3、 日志处理流程和1ogstash组件
1)日志处理流程
集中化对日志进行管理
logstash将服务器日志采集完格式化完成后输出到elasticsearch服务器上
格式化数据后创建索引存储数据方便用户查找数据:
客户端使用kibana将数据通过浏览器展示给用户查看
2) logstash的组件
shipper: .
监控日志变化
broker:负载采集来自多个shipper.上的数据
indexer:
日志存储将日志保存到服务器本地
search and storage:
对采集的日志时间进行检索和存储
web interface: 访问日志服务器的入口，通过浏览器访问