基于批处理作业的非周期性指标的Prometheus警报

编程问答 2022-08-14

问题描述

我有一个CronJob，它每20分钟运行一次，并且仅收集Jenkins多分支作业的活动构建，该构建持续时间超过了特定值，并将这些度量标准与构建持续时间作为值发布给Prometheus Pushgateway。因此，如果构建完成，则不会推送该指标。我使用以下Prometheus配置设置了警报。

- alert: BuildDurationExceeded
    expr: jenkins_build_duration > 7200
    annotations:
      title: 'Build duration is too long at {{ $labels.instance }}'
      description: 'Build time of job {{ $labels.job }} on {{ $labels.instance }} exceeded 2h.'
    labels:
      severity: 'high'

以下是Prometheus中存在的一个指标值

jenkins_build_duration{branch="repo/branch_name",build_number="5",instance="https://jenkins-instance.com/",jenkins_url="https://jenkins-instance.com/job/repo/job/branch_name/5/",job="jenkins_metrics_job",job_name="repo"}    10000

使用此配置，一旦创建警报，便将其永久保留并且不会被删除。当指标不是针对给定作业的定期指标时，如何处理该用例；当指标不再可用时，如何删除警报？

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）

prometheusprometheus-alertmanagerprometheus-pushgateway