Prometheus 已经成为云原生监控的事实标准。整个生态包含诸多组件，为了简化安装部署和配置高可用等，社区开发了kube-prometheus项目。接下来用一系列文章介绍一下相关配置。
kube-prometheus 安装后创建的CRD及作用
| CRD | 作用 |
|---|---|
| alertmanagerconfigs | alertmanager配置 |
| alertmanagers | alertmanager实例 |
| podmonitors | 通过selector选择被监控的pod和metrics 端点 |
| probes | 创建blackbox监控目标 |
| prometheuses | Prometheus实例 |
| prometheusrules | 创建告警规则 |
| servicemonitors | 创建监控目标 |
| thanosrulers | 数据集中存储 |
安装
安装非常简单
参考项目github主页，注意不同版本与kubernetes兼容性（主页有兼容性矩阵）。
建议下载与kubernetes版本兼容的最新的版本。
安装命令：
kubectl apply --server-side -f manifests/setup
kubectl wait \
--for condition=Established \
--all CustomResourceDefinition \
--namespace=monitoring
kubectl apply -f manifests/
如果要修改Prometheus配置就编辑prometheuses 这个CR，直接编辑statefulset是没作用的。如要修改Prometheus pod的resource request和limits，或者数据保留天数 retention:（默认30d），或者为Prometheus挂载持久化存储。
kubectl -n monitoring edit prometheuses k8s
如果要修改Alertmanager配置就编辑alertmanagers这个CR，直接编辑statefulset是没作用的。如修改日志级别为debug 以调试。
kubectl -n monitoring edit alertmanagers main
Grafana 直接修改deployment。如持久化存储等。
kubectl -n monitoring edit deployments.apps grafana
