Azure Kubernetes - Prometheus 自动服务发现？

Question

我已按照以下配置在我的 Azure Kubernetes 上安装并配置了 Prometheus

prometheus_values.yaml
======================
global:
  scrape_interval: 1m
  scrape_timeout: 10s
  evaluation_interval: 1m
# Forcing Kubelet metrics scraping on http 
kubelet:
  enabled: true
  serviceMonitor:
    https: false
# Disabling scraping of Master Nodes Components
kubeControllerManager:
  enabled: false
kubeScheduler:
  enabled: false
kubeEtcd:
  enabled: false
kubeProxy:
  enabled: false
scrape_configs:
- job_name: dev-go-app
  static_configs:
  - targets: ['40.x.x.x:8080']
- job_name: default-go-app
  static_configs:
  - targets: ['40.x.x.x:8080']

并安装了prometheus，如下所示

Installing prometheus
=====================
helm upgrade --install prometheus \
--namespace monitoring \
stable/prometheus \
--values prometheus_values.yaml 

看来我必须手动更新 Prometheus 配置并应用于每个应用程序，这是一项艰巨的任务，尤其是当我在同一个 Azure Kubernetes 集群中有 100 多个应用程序时。

有没有办法让 Prometheus 自动发现 Kubernetes 服务并开始提取指标？

Answer 1

我建议设置一个 kube-prometheus-stack (以前的 prometheus-operator)，而不是使用裸露的 Prometheus: https://github.com/prometheus-community/helm-charts/tree/main/charts/kube-prometheus-stack

该堆栈有一个内置的发现机制 - 一个名为 ServiceMonitor 的 CRD:https://coreos.com/operators/prometheus/docs/latest/user-guides/running-exporters.html 。这是一个选择器，它将通过标签自动发现您的服务，进一步发现这些服务背后的 pod，并将它们加载到 Prometheus scrape 配置中。