仅监控一个命名空间 Pod - Prometheus & Kubernetes & cadvisor

问题描述

我已经在 kubernetes 上部署了 istio，并且我从 istio 插件安装了 prometheus。我的目标是只监视一个应用程序的一些 pod（例如 bookinfo 应用程序的所有 pod）。监控 Pod 的作业定义如下：

    - bearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/token
      job_name: kubernetes-nodes-cadvisor
      kubernetes_sd_configs:
      - role: node
      relabel_configs:
      - action: labelmap
        regex: __Meta_kubernetes_node_label_(.+)
      - replacement: kubernetes.default.svc:443
        target_label: __address__
      - regex: (.+)
        replacement: /api/v1/nodes/$1/proxy/metrics/cadvisor
        source_labels:
        - __Meta_kubernetes_node_name
        target_label: __metrics_path__
      scheme: https
      tls_config:
        ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crt
        insecure_skip_verify: true

我的问题是我不知道如何只监控一个命名空间的 pod。例如，我将 bookinfo 应用程序部署在名为 Book 的命名空间中。我只想要命名空间 Book 中的 pod 指标。但是，prometheus 会收集节点的所有 pod 指标。我想知道是否有一种方法可以通过更改上面的作业定义来仅选择一个命名空间，而不是像 Monitor only one namespace metrics - Prometheus with Kubernetes 这样更改应用程序的注释。或者有什么方法可以通过它的标签来选择显示器？

解决方法

以下将匹配所有带有标签的目标 pod：some_label 与任何值。

relabel_configs:
  - action: keep
    source_labels: [__meta_kubernetes_pod_label_some_label]
    regex: (.*)

如果您想保留带有标签：monitor 和值：true 的目标，您可以这样做：

relabel_configs:
  - action: keep
    source_labels: [__meta_kubernetes_pod_label_monitor]
    regex: true

所有不匹配的 pod 将从抓取中删除。

对于命名空间，您应该可以这样做：

relabel_configs:
  - action: keep
    source_labels: [__meta_kubernetes_namespace]
    regex: Book

---

编辑>

有没有办法将 [container_label_io_kubernetes_container_name] 标签更改为“container_name”？

试试这个：

relabel_configs:
  - action: replace
    source_labels: [container_label_io_kubernetes_container_name]
    target_label: container_name

这一切都在prometheus docs about configuration

中进行了解释 ,

我在cadvisor的文档中找到了一个方法。 https://github.com/google/cadvisor/blob/master/docs/runtime_options.md 它说我们可以更改参数“--docker_only”和“--raw_cgroup_prefix_whitelist”来选择要监控的容器。