k8s部署prometheus监控并报警

### 在 Kubernetes 上部署 Prometheus 并实现监控与报警配置

#### 安装 Prometheus Operator
为了更方便地管理 Prometheus 实例及其相关资源，在 Kubernetes 中通常会先安装 Prometheus Operator。这可以通过 Helm 或者手动创建自定义资源来完成。

对于基于 Helm 的安装方法，可以执行如下命令：

helm repo add prometheus-community https://prometheus-community.github.io/helm-charts
helm repo update
helm install prometheus prometheus-community/prometheus -n monitoring --create-namespace

上述操作将会在 `monitoring` 命名空间下安装一个完整的 Prometheus 监控栈[^3]。

#### 创建 ServiceMonitor 和 PodMonitor 资源
为了让 Prometheus 自动发现目标服务并收集其度量信息，需要为待监控的服务定义相应的 `ServiceMonitor` 或 `PodMonitor` 对象。这些对象允许指定哪些标签匹配的服务会被纳入到抓取范围内，并指定了具体的端口路径等细节[^2]。

例如，如果要让 Prometheus 抓取某个应用的 HTTP 接口 `/metrics` 下暴露出来的性能指标，则可以在该应用程序对应的 Deployment/StatefulSet YAML 文件里加上特定的注解，如下面所示:

apiVersion: apps/v1
kind: Deployment
metadata:
  name: example-app
spec:
  template:
    metadata:
      labels:
        app: example-app
      annotations:
        prometheus.io/scrape: "true"
        prometheus.io/path: /metrics
        prometheus.io/port: "8080"
...
---
apiVersion: monitoring.coreos.com/v1
kind: ServiceMonitor
metadata:
  name: example-service-monitor
  namespace: monitoring
spec:
  selector:
    matchLabels:
      app: example-app
  endpoints:
  - port: web

这段配置意味着任何带有 `app=example-app` 标签的服务都会被 Prometheus 所监控，并且访问地址将是 `<service-ip>:<port>/metrics` 形式的 URL 地址[^1]。

#### 设置告警规则
Prometheus 支持通过编写 PromQL 查询语句来自定义告警条件。告警规则文件一般存放在 ConfigMap 当中，之后再挂载给 Alertmanager 使用。这里给出一段简单的告警规则样例：

groups:
- alert: HighRequestLatency
    expr: job:request_latency_seconds:mean5m{job="example"} > 0.5
    for: 10m
    labels:
      severity: page
    annotations:
      summary: "{{ $labels.instance }} has high request latency"
      description: "{{ $labels.instance }} of job {{ $labels.job }} has had a mean request latency above 0.5s (current value: {{ $value }}}"

此段配置表示当名为 “example” 这个 Job 请求延迟均值超过半秒持续时间达到十分钟时触发警告通知[^4]。

#### 整合 Alertmanager 处理告警事件
Alertmanager 是用来处理由 Prometheus 发送过来的各种类型的告警消息的应用程序。它可以按照预设策略分发邮件、Slack 消息或者其他形式的通知给相关人员或团队。同样地，也可以利用 Helm 来简化这一过程中的部署工作：

helm install alertmanager prometheus-community/alertmanager -n monitoring

最后一步就是确保 Prometheus 已经正确指向了新建立好的 Alertmanager 实例作为接收方之一。这通常是修改 Prometheus CRD 配置项里的 `.spec.alerting.alertmanagers[]` 字段来达成目的。