cadvisor+node_exporter+prometheus+grafana实现docker与主机监控

docker prometheus

字数统计: 1k阅读时长: 4 min

 2021/07/12   Share

网上一大堆关于docker监控的工具和案例，这章主要说下如何通过cadvisor+node_exporter+prometheus完成对docker及主机的监控，并且通过grafana来完成监控数据的展示。

简述下今天用到的几个组件，其中node_exporter是用来监控主机信息的，cadvisor是用来监控容器信息的，这俩组件对于prometheus而言都是采集器的作用，prometheus会收集这些采集器的监控数据，存储到内置的数据库中，后续可以通过Prometheus表达式来进行过滤查看等操作（这篇不作为重点讲），最后Grafana 会对接Prometheus，将监控数据通过Web UI的方式展示出来。

环境准备

先说下我本地的环境：

主机名	IP地址	已运行docker容器
slions_pc1	192.168.100.10	slions_nginx1;slions_busybox1
slions_pc2	192.168.100.11	slions_nginx2;slions_busybox2

准备了2台机器，并且上面已经启动了一些容器。

安装node_exporter

2台机器都执行以下命令（–name处根据自己喜好改）：

[root@slions_pc1 ~]# docker run -d \
>   --net="host" \
>   --pid="host" \
>   -v "/:/host:ro,rslave" \
>   --name slions_node-exporter1 \
>   quay.io/prometheus/node-exporter:latest \
>   --path.rootfs=/host

安装好后可以检查下node_exporter默认的监听端口是否存在，如下说明正常

1 2	[root@slions_pc1 ~]# ss -lntp\|grep 9100 LISTEN 0 128 :::9100 :::* users:(("node_exporter",pid=12094,fd=3))

可以使用chrome访问下，出现如下则说明成功，如果你使用浏览器刷不出来数据请先确保防火墙是否关闭。

安装cadvisor

2台机器都执行以下命令（–name处根据自己喜好改）：

[root@slions_pc1 ~]# docker run \
>   --volume=/:/rootfs:ro \
>   --volume=/var/run:/var/run:ro \
>   --volume=/sys:/sys:ro \
>   --volume=/var/lib/docker/:/var/lib/docker:ro \
>   --publish=8080:8080 \
>   --detach=true \
>   --name=slions_cadvisor1 \
>   --privileged \
>   --network host \
>   google/cadvisor

安装好后可以检查下node_exporter默认的监听端口是否存在，如下说明正常

1 2	[root@slions_pc1 ~]# ss -lntp\|grep 8080 LISTEN 0 128 :::8080 :::* users:(("cadvisor",pid=12344,fd=9))

同样我们可以使用chrome访问下主机的8080，如图出现了cadvisor的监控数据。

安装prometheus

选择第一台机器作为prometheus服务端，prometheus服务需要通过配置文件来读取监控目标，我们先在本地编写配置文件，后续通过挂载的方式置入服务中：

[root@slions_pc1 ~]# cat prometheus/prometheus.yml
global:
  scrape_interval:     15s # By default, scrape targets every 15 seconds.
  evaluation_interval: 15s # Evaluate rules every 15 seconds.

  # Attach these extra labels to all timeseries collected by this Prometheus instance.
  external_labels:
    monitor: 'slions-monitor'

rule_files:
#  - 'prometheus.rules.yml'

scrape_configs:
  - job_name: 'prometheus'
    scrape_interval: 5s
    static_configs:
      - targets: ['localhost:9090']

  - job_name: 'node'
    scrape_interval: 5s
    static_configs:
      - targets:
        - 192.168.100.10:9100
        - 192.168.100.11:9100

  - job_name: 'docker'
    scrape_interval: 5s
    static_configs:
      - targets:
        - 192.168.100.10:8080
        - 192.168.100.11:8080

启动Prometheus服务：

1	[root@slions_pc1 ~]# docker run -d -p 9090:9090 --volume /root/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml --name slions_prometheus --network host prom/prometheus

验证服务是否正常启动：

1 2	[root@slions_pc1 ~]# ss -lntp\|grep 9090 LISTEN 0 128 :::9090 :::* users:(("prometheus",pid=13113,fd=7))

chrome访问http://192.168.100.10:9090可以看到已经出现了prometheus的页面

点击Status中的Targets按钮，会发现正是我们配置的那几个监控目标

安装grafana

在第一台机器部署grafana，启动时设置登录密码

1 2	[root@slions_pc1 ~]# docker run -itd --name slions_grafana -p 3000:3000 -e "GF_SERVER_ROOT_URL=http://grafana.server.name" -e "GF_SECURITY_ADMIN_PASSWORD=slions" --network host grafana/grafana

查看服务是否正常：