consul+promethus+grafana服务监控

一、介绍

使用此三个工具实现服务注册、监控、显示
github本人相关代码
包括docker-compose文件、volumes挂载的文件

参考文章如下 :

  1. https://mp.weixin.qq.com/s?__biz=MzA4MjkxMzMyNg==&mid=2654075110&idx=1& sn=8ad4e8fbae6e7e1280a2a9eb7951db14&chksm=843b29a7b34ca0b11a30d7d157c8c81028ad59e1ecf0c42e8f79b7808b3cb56487b74fad2608&scene=21#wechat_redirect
  2. https://zhuanlan.zhihu.com/p/92454378
  3. https://www.jianshu.com/p/413fd42ae660

1. consul

consul官网
Consul是一个服务管理软件。支持多数据中心下,分布式高可用的,服务发现和配置共享。采用 Raft 算法,用来保证服务的高可用

2. promethus

promethus官网
详解
详解
Prometheus是最初在SoundCloud上构建的开源系统监视和警报工具包

3. grafana

grafana官网
Grafana是一个跨平台的开源的度量分析和可视化工具,可以通过将采集的数据查询然后可视化的展示,并及时通知

二、安装

可以从各个工具官网进行下载、解压安装,详见官网。
本次采用docker部署。
前期准备,创建docker network

docker network create --subnet=172.30.1.0/24 serviceMonitor

采用docker-compose执行
注意docker-compose中加入网络
加入网络

1. consul安装

使用官方的镜像

docker search consul

consul+promethus+grafana服务监控
docker-compose.yml 中consul部分如下

consul:
    image: consul
    container_name: consul
    restart: always
    ports:
     - "8500:8500"
    volumes:
     - /etc/localtime:/etc/localtime
     - /home/zwx/serviceMonitor/consul/config:/consul/config
     - /home/zwx/serviceMonitor/consul/data/:/consul/data/
    networks: 
      serviceMonitor:
        ipv4_address: 172.30.1.50
    logging:
      driver: json-file
      options:
        max-size: "200k" # 单个文件大小为200k
        max-file: "5" # 最多5个文件
    depends_on:
      - prometheus

注意:
需要给 consul 固定一个ip,为了它自己的config.json文件
consul命令参数
成功建立consul容器后,访问服务器ip:8500界面如下
consul+promethus+grafana服务监控
注意:
此时consul中还未有注册的服务,待node-exporter和prometheus安装后,可添加json再重启consul容器。

可通过json进行服务注册:

  • 在config中新建linux-exporter.json
  • 添加如下内容
{
   "service": {
     "id": "linux_exporter",
     "name": "local_exporter",
     "address": "node-exporter",
     "port": 9100,
     "tags": [],
     "checks": [
       {
         "http": "http://node-exporter:9100/metrics",
         "interval": "60s"
       }
     ],
     "meta": {
       "checkport": "9100",
       "location": "test"
     }
   }
}

prometheus同样,只是端口为9090,服务http不同。

2. prometheus安装(包括node-exporter)

docker search prometheus
docker pull prom/prometheus
docker search node-exporter
docker pull prom/node-exporter

docker-compose.yml中如下

node-exporter:
    image: prom/node-exporter
    restart: always
    expose:
      - "9100"
    networks: 
      serviceMonitor:
        ipv4_address: 172.30.1.51
    container_name: node-exporter
prometheus:
    image: prom/prometheus
    container_name: myprom
    restart: always
    ports:
      - "9090:9090"
    volumes:
      - /etc/localtime:/etc/localtime
      - home/zwx/serviceMonitor/prometheus.yml:/etc/prometheus/prometheus.yml
    networks: 
      serviceMonitor:
        ipv4_address: 172.30.1.52
    logging:
      driver: json-file
      options:
        max-size: "200k" # 单个文件大小为200k
        max-file: "5" # 最多5个文件
    depends_on:
      - node-exporter

注意:
prometheus需要新建prometheus.yml挂载,路径见上。
这里获取了prometheus自己的、node-exporter和consul中的数据

global:
  scrape_interval: 60s
  evaluation_interval: 60s
 
scrape_configs:
  - job_name: prometheus
    static_configs:
      - targets: ['localhost:9090']
        labels:
          instance: prometheus
 
  - job_name: linux
    static_configs:
      - targets: ['node-exporter:9100']
        labels:
          instance: 'node-exporter'

  - job_name: consul-prometheus
    consul_sd_configs:
      - server:   'consul:8500'
        services: []
    relabel_configs:
      - source_labels: ['__meta_consul_service']
        regex:  .*prometheus.*
        action:  keep  

3. grafana

docker search grafana
docker pull grafana/grafana

docker-compose.yml 中

grafana:
    image: grafana/grafana
    container_name: grafana
    restart: always
    ports:
      - "3000:3000"
    networks:
      - "serviceMonitor"
    logging:
      driver: json-file
      options:
        max-size: "200k" # 单个文件大小为200k
        max-file: "5" # 最多5个文件

三、运行

1. consul界面

consul+promethus+grafana服务监控

2. prometheus界面

consul+promethus+grafana服务监控

3. grafana界面与配置

grafana打开后需要登录
consul+promethus+grafana服务监控
默认的用户名密码均为admin
首先在侧边栏配置数据源,添加我们的prometheus
consul+promethus+grafana服务监控
consul+promethus+grafana服务监控
注意:
填写地址的时候,一定加上http:// 与端口(默认9090)
点击下方save&test
然后就可以开始自己添加图表啦!
参考官网教程

本次给出一个import方式,使用node-exporter数据
点击侧边栏Create–import
consul+promethus+grafana服务监控
从官网找到想要的模板
官网搜索node
consul+promethus+grafana服务监控
点击这个进去,找到编号,复制。
consul+promethus+grafana服务监控
回到grafana中,填写编号,load
consul+promethus+grafana服务监控
在下方选中数据源,然后点击import
consul+promethus+grafana服务监控
出现dashboard,有模板内容。可对此进行自定义调整。
consul+promethus+grafana服务监控
完毕

上一篇:javascript 重难点(原型链 this) 理解总有一个过程,不要急,循序渐进!


下一篇:Grafana + Promethus 监控JVM