依葫芦画瓢,我用Loki画了个Traefik的面板

云原生小白 · · 484 次点击 · · 开始浏览    
这是一个创建于 的文章,其中的信息可能已经有所发展或是发生改变。

前段时间在Loki2.0发布时,更新了一个配套的用LogQL语法绘制Nginx监控面板的Demo。今天小白准备用同样的手法炮制一个基于Traefik日志的监控面板。还不清楚之前Nginx面板操作的同学可以看参考文末后的推荐阅读。

Traefik

Traefik是一个用Golang实现的云原生轻量级HTTP反向代理工具。由于它支持配置适配多种后端服务(docker,kubernetes,Mesos,redis)来做动态的路由配置。当前Rancher的边缘产品K3S也默认把Traefik作为默认的Ingress管理器,足以可见traefik也越来越受到广大开发者的喜爱。

那么,Traefik的可观察性除了打开默认的Metrics之外,我们还可以通过日志方式绘制实时监控面板。

配置Access Logs

traefik默认的access log格式如下:

<remote_IP_address> - <client_user_name_if_available> [<timestamp>] "<request_method> <request_path> <request_protocol>" <origin_server_HTTP_status> <origin_server_content_size> "<request_referrer>" "<request_user_agent>" <number_of_requests_received_since_Traefik_started> "<Traefik_router_name>" "<Traefik_server_URL>" <request_duration_in_ms>ms

虽然看起来比较直观,不过这样的日志存入在Loki中,我们还需要通过正则表达式解析,非常的不方便。所以我们还是将日志格式改为json,方便logql解析。

按如下方式修改traefik.yaml

accessLog:
  format: json

默认traefik的日志输出为stdout,如果你的采集端是通过读取文件的话,则需要用filePath参数将traefik的日志重定向到文件目录

绘制Grafana面板

大体的监控面板,小白已经绘制好并发布到Grafana Lab,我们访问页面https://grafana.com/grafana/dashboards/13713就可以将面板下载到本地

image.png

将下载的面板json文件导入到Grafana,导入后更换uidLoki源

image.png

导入后你将获得一个空白的面板,如下


image.png

别急,空白的原因是logql没有查询到合适日志,我们需要修改每个panel的查询语句,让他定位到合适的日志。面板默认的日志标签是{job="/var/log/traefik.log"},我们需要改成适应自己环境的label

image.png

最后就能得到如下面板,在这里我们可以看到经过Treafik的HTTP请求状态请求耗时以及路由分布等信息。

image.png

总结

Traefik的面板仅仅只是依葫芦画瓢的抄袭了官方的Nginx面板,不过在"抄袭"的过程中也能学习到几个LogQL的重要语句的使用场景。

  • 样本排序统计百分位

在TP95的面板中我们使用了如下语法,主要的意思是将traefik日志中的Duration值按照时间变量$__interval进行排序,取第95%位上的值

quantile_over_time(0.95,{job="xxx"} 
|= "RequestProtocol"
| json 
| unwrap Duration 
|  __error__=""  [$__interval]) by (ServiceName)
  • 统计请求异常率

在异常请求率的面板中,我们不光使用了Label filters来过滤状态中大于400的请求,同时还用除法/来计算整体的异常百分比。

sum(rate({job="xxx"} 
|~ "RequestProtocol" 
| json 
| OriginStatus >= 400 
|__error__=""[$__interval])) 
/ (sum(rate({job="xxx"} 
|~ "RequestProtocol" 
| json 
| __error__=""[$__interval])) 
/ 100)

可以看到,LogQL v2强大的日志查询分析能力让日志的可玩性大幅提升。和Prometheus一样,Loki作为云原生可观测性下的日志一环,其后续发展也越来越值得关注。


关注公众号「云原生小白」,获取更多精彩内容


有疑问加站长微信联系(非本文作者)

本文来自:简书

感谢作者:云原生小白

查看原文:依葫芦画瓢,我用Loki画了个Traefik的面板

入群交流(和以上内容无关):加入Go大咖交流群,或添加微信:liuxiaoyan-s 备注:入群;或加QQ群:692541889

484 次点击  
加入收藏 微博
暂无回复
添加一条新回复 (您需要 登录 后才能回复 没有账号 ?)
  • 请尽量让自己的回复能够对别人有帮助
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`
  • 支持 @ 本站用户;支持表情(输入 : 提示),见 Emoji cheat sheet
  • 图片支持拖拽、截图粘贴等方式上传