java prometheus 自定义指标上报数据 prometheus常用函数

转载

laojean 2023-12-09 14:56:28

文章标签 prometheus 服务器时间间隔时间段 文章分类 Java 后端开发

1.函数

rate()

rate函数，rate用来计算两个间隔时间内发生的变化率（一段时间内平均每秒的增量）。

专门用来搭配Counters类型的数据，rate(指标名{筛选条件}[时间间隔])

比如查看1分钟内非idle的cpu使用率

rate(node_cpu_seconds_total{mode!="idle"}[1m])

irate()

rate与irate的区别
irate和rate都会用于计算某个指标在一定时间间隔内的变化速率。但是它们的计算方法有所不同：irate取的是在指定时间范围内的最近两个数据点来算速率，而rate会取指定时间范围内所有数据点，算出一组速率，然后取平均值作为结果。

所以官网文档说：irate适合快速变化的计数器（counter），而rate适合缓慢变化的计数器（counter）。

根据以上算法我们也可以理解，对于快速变化的计数器，如果使用rate，因为使用了平均值，很容易把峰值削平。除非我们把时间间隔设置得足够小，就能够减弱这种效应。

相同函数，截取不同时间的图形分析:

rate(node_network_receive_bytes_total{device="ens32",instance="k8s-node1"}[1m])

1分钟内增加了 1000bytes （假设）
5分钟内增加了 5000bytes （假设）

会把1000bytes除以 1m*60秒，=～16bytes/s 就是这样计算出在这1分钟内，平均每秒钟增加 16bytes

把5分钟内的增量除以 5m*60s ，5分钟的增量假如是 5000 ，那么除以300 以后也还是约等于 =~ 16bytes/s

以上两种时间段的取法，都是假设成⼀种平均的取法，这是一种假设的理想状态，事实上生产环境网络数据接收量可不是这么平均的。有可能在第一分钟增加了 1000，到第二分钟就变成增加了2500….

所以 rate(1m) 这样的取值方法比起 rate(5m) ，因为它取的时间段短，所以任何某⼀瞬间的凸起或者降低在成图的时候会体现的更细致更敏感而rate(5m)把整个5分钟内的都⼀起平均了，那么当发生瞬时凸起的时候，会显得图平缓了⼀些（因为取的时间段长把波峰波谷都给平均消下去了）

increase()

increase 函数在promethes中，是用来针对Counter 这种持续增长的数值，截取其中⼀段时间的增量（一段时间内的总增量）

increase(node_cpu_seconds_total[1m]) =》这样就获取了 CPU总使用时间在1分钟内的增量

sum( )

比如上面得到各个指标的cpu使用率，如果我想计算总的cpu使用率怎么办？

sum( ) 就如其字⾯意思⼀样起到value 加合的作用 sum( increase(node_cpu_seconds_total[1m]) ) 外⾯套⽤⼀个sum 即可把所有核数值加合

问题1：所有机器的CPU 也全都加到⼀起了，变成服务器集群总CPU平均值了？

by()

by (instance) 这个函数可以把 sum加合到⼀起的数值按照指定的⼀个方式进行一层的拆分

instance 代表的是机器名

意思就是说把sum函数中服务器加合的这个糗事再给它强行拆分出来

sum(increase(node_cpu_seconds_total{mode=“idle”}[1m])) by (instance)
sum() by (cluster_name) 可以帮我们实现集群加合并分三条曲线输出了，顺带一提的是 (cluster_name) 这个标签，默认node_exporter是没有办法提供的，node_exporter只能按照不同的机器名去划分。如果希望支持cluster_name 我们需要自行定义标签。