普罗米修斯警报管理器 - CPU 高不警报

Question

我配置了 prometheus 警报管理器，但是当我的一台服务器的 CPU 使用率达到 99% 时，他不会发出警报。 这是警报：

- alert: HostHighCpuLoad
  expr: avg(irate(node_cpu_seconds_total{mode="idle"}[1m]) * 100) < 30
  for: 1m
  labels:
    severity: warning
  annotations:
    summary: "High usage on {{ $labels.instance }}"
    description: "{{ $labels.instance }} has a average CPU idle (current value: {{ $value }}s)"

看起来像我的表达，取我所有服务器的全局平均值，但我需要监控每台服务器的这个度量。

有人已经遇到这个问题了吗？

Answer 1

是的，它正在考虑所有实例的平均值。 将表达式更改为：

avg by (instance) (irate(node_cpu_seconds_total{mode="idle"}[1m]) * 100) < 30