grafana

一直想实现对Nginx前端代理的一套系统监控，研究了Nginx自带的vts，发现有一些数据无法直观的进行展示。后面看到Loki可以对Nginx进行数据采集及对应模板展示，本次环境使用Loki采集Nginx日志信息，并进行图表展示

下午突发奇想，天天企业微信发送告警，但是没有统计过告警都收到过哪些，都是哪些级别，持续的时间又是多长，下午在官方文档找到一个项目alertsnitch。可以对我们的Alertmanager发送的告警进行持久化，实际上就是一个webhook接收器，Alertmanager的数据采集同步写入到Mysql中为以后的数据分析 效果图下 由于官方Alertmanager 本身不支持的通知机制，所以我们需要w…

之前写过ceph的搭建，那么我们ceph同样也需要prometheus进行监控数据。我这里使用prometheus监控ceph并配置alertmanager告警

blackbox exporter 是prometheus社区提供的黑盒监控解决方案，运行用户通过HTTP、HTTPS、DNS、TCP以及ICMP的方式对网络进行探测(主动监测主机与服务状态)。

随着时间的更新，早期写过的Promethues监控k8s和grafana这一块文章已经有需要修改的地方。并且以前使用nfs为pod进行持久化，本地修改为使用ceph进行持久化，版本也进行更新迭代

按照官方文档默认部署grafana没有对我们配置文件进行持久化，属于使用grafana默认的配置，我们要修改配置文件是无法进行修改的。文件权限被设置为只读，那么接下来我们通过持久化grafana.ini开启匿名登录 本文搭建文档 首先我们将grafana.ini和defaults.ini从容器拷贝到本地 grafana启动时，首先会调用/usr/share/grafana/conf/default…

目前grafana流行的模板都是通过InfluxDB为数据源，使用Telegraf来收集数据。为了统一管理，找了很久的prometheus数据源。来对接VMware_exporter

最近服务器添加监控和报警后，发现服务器网卡流量监控不准确。因为我服务本身就10M带宽，但是这里的上行和下行带宽竟然高达30M。这里的模板我使用的是大家用的比较多的8919模板 搭建文档可以参考 问题分析 首先我这里将grafana的出图语句复制下来进行分析 我们复制监控项的语句到Prometheus上进行查看 我没有添加任何规则，发现获取的网卡流量包含docker、lo以及eth的流量 解决问题 …

首先展示一下效果图 组件介绍 我们监控用了以下监控组件 Telegraf (StatsD) 是一个使用 Node.js 开发的简单的网络守护进程，通过 UDP 或者 TCP 方式侦听各种统计信息，包括计数器和定时器，并发送聚合信息到后端服务，例如 Graphite 、 ElasticSearch 、 InfluxDB 等等，这里 列出了支持的 backend Grafana 是一个使用 Go 开发…