prometheus和grafana监控服务器状态

介绍

舍友把软路由安装到路由器上了，原本装软路由的设备就重装了系统，安装了docker并被我知道了密码！！！屋里的linux设备也有5个了，就找了找可以监控设备运行状态的软件，选择了prometheus和grafana的，用舍友的设备，可以先看下效果。基本信息，硬盘空间等数据都可以在此显示出来。其中也有各种各样的监控内容，也存在专门监控mysql运行情况的prometheus-mysqld-exporter。

安装

服务端

首先确定环境中存在docker以及docker-compose，通过这两个安装prometheus和grafana的服务端。

version: "3"
services:
  prom:
    image: quay.io/prometheus/prometheus:latest
    restart: unless-stopped
    volumes:
     - ./data/monitor/prometheus.yml:/etc/prometheus/prometheus.yml
    command: "--config.file=/etc/prometheus/prometheus.yml --storage.tsdb.path=/prometheus"
    ports:
     - 9090:9090
  grafana:
    image: grafana/grafana
    restart: unless-stopped
    ports:
     - "3000:3000"
    environment:
    - “GF_SECURITY_ADMIN_PASSWORD=Gz2020@”
    - “GF_INSTALL_PLUGINS=alexanderzobnin-zabbix-app”
    volumes:
      - ./data/grafana-etc:/etc/grafana/
      - ./data/grafana:/var/lib/grafana:rw
      - /etc/localtime:/etc/localtime
    depends_on:
      - prom

在docker-compose.yml的文件夹下创建data/monitor目录，在文件夹内创建prometheus.yml，以安装服务端的机器为例，设置job_name为server，需要监控的ip是192.168.1.31:9100，安装客户端在下文会给出。

scrape_configs:
  - job_name: 'server'
    static_configs:
    - targets: ['192.168.1.31:9100']

配置好服务端直接运行docker-compose up -d运行，可以在服务端的9090和3000端口看到状态信息。

客户端

在需要的机器上安装prometheus-node-exporter。可以使用linux上对应的包管理工具进行安装。

安装成功后启动prometheus-node-exporter

systemctl start prometheus-node-exporter

确认是否安装成功

登陆服务端9090端口，192.168.1.31:9090/targets?search=可以看到设备已经在这里状态是up了，代表安装成功。

配置grafana

进入http://192.168.1.31:3000grafana会进行系统的安装引导，按照引导执行即可

配置数据源

在http://192.168.1.31:3000/datasources配置所需要的数据源，点击Add data source，搜索并点击prometheus，在URL中设置http://prom:9090，如果进行过其他设置，也可在其他配置项中进行设置。配置后点击Save & test即可完成数据源配置。

设置仪表盘

在http://192.168.1.31:3000/dashboards中创建仪表盘，可以通过官方网站https://grafana.com/grafana/dashboards/?pg=hp&plcmt=lt-box-dashboards寻找自己认为好看的仪表盘进行直接导入。以我现在使用的为例，在官方网站搜索到的仪表盘点击进入后在右下方会有Copy ID to clipboard和Download JSON，ID可以通过公网直接导入，JSON文件可以离线导入。在仪表盘中点击Import输入ID8919，点击Load，点击后可以设置名称和UID，一定要记得进行配置数据源，在此界面选择Prometheus，设置好自己的数据源后即可完成设置。

现在进入仪表盘就可以看到自己的配置好的界面显示出来了，点击查看即可。