一款炫技的监控系统-Prometheus+Grafana安装记

左舷的风 · · 2657 次点击 · · 开始浏览    
这是一个创建于 的文章,其中的信息可能已经有所发展或是发生改变。

一、前言:

  之前部门用的zabbix 2.0版本的监控系统年事已高,看着那古老又单调的界面真是一点兴趣都没有。正好最近在学习k8s,偶然间看到一篇文章介绍了使用(Prometheus+Grafana)搭建的监控系统,页面很炫,本着喜新厌旧,颜值即正义,特地搭建了个研究研究,毕竟学习使我快乐!

二、Prometheus(普罗米修斯)的特点简介:

  用过zabbix的朋友应该知道,它是用C(agent/server端)+PHP(前端)+Mysql(存储)的架构。本司1800+主机,8W+的监控项,每月近80G的监控数据(history,history_unit等表),虽然做了按月分区分表,但是数据库压力还是很大。而且前端页面单调,二次开发难度高(其实是小破厂本部门没有专门的PHP开发人员,C更没用了)。
  而Prometheus(普罗米修斯),使用Go语言开发(Golang好火!有个同学竟然在朋友圈里大声宣布说Go是世界上最好的语言!),是Google BorgMon监控系统的开源版本。(k8s是Google Borg的开源版本)。
  监控数据则是存储在自研的基于时间序列的数据库(TSDB)内,获取各节点监控数据的方式是使用pull模型调各监控节点的http端口(服务端主动去客户端拉取数据)(Go语言开发+pull方式调各节点http端口,像不像小米自研那个open-falcon)等等......
  Prometheus特点很多,之后的文章再详细介绍以及和zabbix的对比,此篇点到为止

三、安装Prometheus主节点:

Prometheus官网:https://prometheus.io/

wget https://github.com/prometheus/prometheus/releases/download/v2.12.0/prometheus-2.12.0.linux-amd64.tar.gz
tar zxvf prometheus-2.12.0.linux-amd64.tar.gz
cd prometheus-2.12.0.linux-amd64

  解压后查看文件夹中两个主要程序和文件:

prometheus         #prometheus的应用程序
prometheus.yml     #prometheus的配置文件

  查看prometheus.yml配置文件:

# my global config
global:
  scrape_interval:     15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.
  evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.
  # scrape_timeout is set to the global default (10s).

# Alertmanager configuration
alerting:
  alertmanagers:
  - static_configs:
    - targets:
      # - alertmanager:9093

# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
  # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
  - job_name: 'prometheus'

    # metrics_path defaults to '/metrics'
    # scheme defaults to 'http'.

    static_configs:
    - targets: ['localhost:9090']

  暂时先不用改,注意最后一行为登录页面
  编辑systemctl配置文件(ExecStart行请根据个人情况修改,--storage.tsdb.path是监控数据存储位置

vim /etc/systemd/system/prometheus.service

[Unit]
Description=prometheus
After=network.target
[Service]
Type=simple
User=root
ExecStart=/data/prometheus/prometheus/prometheus --config.file=/data/prometheus/prometheus/prometheus.yml --storage.tsdb.path=/data/prometheus/storage
Restart=on-failure
[Install]
WantedBy=multi-user.target

systemctl start prometheus   #启动prometheus
systemctl status prometheus  #查看prometheus运行状态

  打开http:127.0.0.1:9090,可见监控页面(用过open-falcon的朋友说说像不像/大雾):


prometheus_01.jpg

  点击上方Status --> targets可见各监控节点(现在只有自己)


prometheus_02.jpg
四、安装Prometheus被监控端:

  下载node端包(prometheus里跟k8s一样管被监控端叫node,zabbix里叫agentd)

wget https://github.com/prometheus/node_exporter/releases/download/v0.18.1/node_exporter-0.18.1.linux-amd64.tar.gz
tar zxvf node_exporter-0.18.1.linux-amd64.tar.gz 
cd node_exporter-0.18.1.linux-amd64

  编辑systemctl配置文件(ExecStart行请根据个人情况修改

vim /etc/systemd/system/node_exporter.service

[Unit]
Description=node_exporter
After=network.target
[Service]
Type=simple
User=root
ExecStart=/data/prometheus_node/prometheus_node/node_exporter
Restart=on-failure
[Install]
WantedBy=multi-user.target

systemctl start node_exporter  #启动被监控端
systemctl status node_exporter  #查看被监控端状态

curl 127.0.0.1:9100/metrics  #返回的事监控数据
五、在Prometheus主节点配置被监控端:

  编辑主节点配置文件prometheus.yml,在最后添加下面的内容(IP请根据个人情况修改):

  - job_name: 'monitor_nodes'
    static_configs:
      - targets: ['10.1.129.121:9100']
        labels:
          instance: node01

systemctl restart prometheus  #重启主节点服务

  刷新页面即可查看到新节点:


prometheus_03.jpg
六、安装Grafana:

  默认的Prometheus的页面也不好看,好在可以使用Grafana给它一个炫技的页面。(Grafana官网:https://grafana.com,其实它也支持zabbix)
  安装Grafana:(https://grafana.com/grafana/download

wget  https://dl.grafana.com/oss/release/grafana-6.3.3-1.x86_64.rpm
sudo yum localinstall grafana-6.3.3-1.x86_64.rpm

systemctl start grafana-server  #启动granfana
systemctl status grafana-server  #查看granfana状态

  打开http://10.1.129.86:3000配置(默认用户密码为admin/admin,第一次登陆会提示你改密码
  选择Prometheus为数据源:

grafana_01.jpg

  按需配置,点击save:
grafana_002.jpg

  之后点击添加模板:

grafana_03.jpg

可在此页面找寻相应的模板然后下载json文件再倒入进去:https://grafana.com/grafana/dashboards

  譬如下载个这个 https://grafana.com/grafana/dashboards/8919,下面有说明要安装饼图的插件,按需操作即可,下载json倒入进去:

grafana_04.jpg

  最终效果:

grafana_05.jpg

  至此,一个Prometheus+Grafana的测试环境已经安装完毕,此篇分享结束
  关于Prometheus+Grafana更深入的研究敬请期待下篇,谢谢!


有疑问加站长微信联系(非本文作者)

本文来自:简书

感谢作者:左舷的风

查看原文:一款炫技的监控系统-Prometheus+Grafana安装记

入群交流(和以上内容无关):加入Go大咖交流群,或添加微信:liuxiaoyan-s 备注:入群;或加QQ群:692541889

2657 次点击  
加入收藏 微博
添加一条新回复 (您需要 登录 后才能回复 没有账号 ?)
  • 请尽量让自己的回复能够对别人有帮助
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`
  • 支持 @ 本站用户;支持表情(输入 : 提示),见 Emoji cheat sheet
  • 图片支持拖拽、截图粘贴等方式上传