ashx在web.config中如何配置_如何在 Istio 1.6 中配置 Prometheus-Operator 和抓取指标

在 Istio1.4 及以上版本中，可观测性指标的创建、交换和抓取的方式已经发生改变。

以下内容讲述了我如何配置 Prometheus Operator 资源以从 Istio1.6 中抓取指标和安装最新版的 Grafana 仪表盘。

ServiceMonitor

Prometheus Operator 比默认的 Prometheus 安装更加动态。它增加了一些 CRD 以动态和透明地重新配置 Prometheus 集群。

ServiceMonitor 资源对象用于描述需要抓取哪些 Service 中的 Pod。

在 Istio1.6 + 版本中，我们需要监控两种类型的资源：Istio 控制平面资源和 Istio 代理的数据平面资源。

为此，我们创建了 2 个不同的 ServiceMonitor：

控制平面

apiVersion: monitoring.coreos.com/v1
kind: ServiceMonitor
metadata:name: prometheus-oper-istio-controlplanelabels:release: prometheus
spec:jobLabel: istioselector:matchExpressions:- {key: istio, operator: In, values: [mixer,pilot,galley,citadel,sidecar-injector]}namespaceSelector:any: trueendpoints:- port: http-monitoringinterval: 15s- port: http-policy-monitoringinterval: 15s

如果你懂一点 Prometheus，很容易看出该控制平面做的事：

使用标签 istio 寻找其对应值是 mixer、pilot 等的服务。
每隔 15 秒抓取名为 http-monitoring 和 http-policy-monitoring 的端口。

需要注意开头处的 labels 标签，它们是必须与 Prometheus 安装的 serviceMonitor Selector 相匹配的选择器。如果此处设置不正确，Prometheus 就不会抓取该资源。

你可以通过查看 prometheus 资源来检查 serviceMonitor 的 mathchLabels 配置：

kubectl get prometheus  -o yaml | grep -A4 serviceMonitorSelector
serviceMonitorSelector:matchLabels:release: prometheus

在我的案例中，它是 release: prometheus。

数据平面

数据平面资源和之前的控制平面差不多，但它针对所有的 Istio 代理的容器并且添加了一些标签重写处理。

apiVersion: monitoring.coreos.com/v1
kind: ServiceMonitor
metadata:name: prometheus-oper-istio-dataplanelabels:monitoring: istio-dataplanerelease: prometheus
spec:selector:matchExpressions:- {key: istio-prometheus-ignore, operator: DoesNotExist}namespaceSelector:any: truejobLabel: envoy-statsendpoints:- path: /stats/prometheustargetPort: http-envoy-prominterval: 15srelabelings:- sourceLabels: [__meta_kubernetes_pod_container_port_name]action: keepregex: '.*-envoy-prom'- action: labelmapregex: "__meta_kubernetes_pod_label_(.+)"- sourceLabels: [__meta_kubernetes_namespace]action: replacetargetLabel: namespace- sourceLabels: [__meta_kubernetes_pod_name]action: replacetargetLabel: pod_name

请确保你写的标签正确以使 Operator 关注到该资源。

如果你不希望 Prometheus 抓取到某一代理的指标，在你的部署中添加 istio-prometheus-ignore=”true” 标签。

结果

等待几秒钟让一切运行完，你就可以通过在 9090 端口进行端口转发连接到你的 Prometheus 前端。也可以通过以 SDS 方式使用 SSL 证书配置的 Istio 入口网关连接前端。

Grafana 仪表盘

既然已经将 Istio Telementry V2 纳入了你的 Prometheus 集群，你也许想用 Grafana 看看图表。

很高兴你能读到这里。我知道这篇博客缺少一些配图，但谁在乎呢？我们是工程师，对吧？ Istio Dashboards for Grafana 的源码存储在许多地方。你可以在 Istio Github repo 中找到最新的版本，但最好的解决方案是从 istio 的 zip 或 tar 安装压缩包中 (获取 istioctl 的地方) 获取与你安装的 Istio 相匹配的版本！从 Istio 文档中得知可以通过以下命令下载最新版本的 Istio：

curl -L https://istio.io/downloadIstio | sh -

该命令会创建一个带有所有 Istio 组件的文件夹。请注意插件（如 Grafana、Kiali、Prometheus 等）很快将不会被 istioctl 管理。你可以在这个文件夹里找到所有的部署脚本。

仪表盘也位于这个文件夹中（本文撰写时使用 istio1.6.7），在 manifests/charts/istio-telemetry/grafana/dashboards/ 目录下。

对想要在 Grafana（被 PrometheusOperator 安装的那个）中被展示的指标，你需要将它们拷贝到 secret 中。以下是我使用的脚本（使用它前先 cd 到你的 istio 文件夹下）：

#!/bin/bash# go into the dashboards folder
pushd manifests/charts/istio-telemetry/grafana/dashboards# create the basic command to create the configmap
ISTIO_DASHBOARD_SECRET="kubectl -n monitoring create cm prometheus-oper-istio-dashboards"# append each file to the secret
for i in *.json ; doecho $iISTIO_DASHBOARD_SECRET="${ISTIO_DASHBOARD_SECRET} --from-file=${i}=${i}"
done# run the secret creation command
eval $ISTIO_DASHBOARD_SECRET# label the configmap so it is used by Grafana
kubectl label -n monitoring --overwrite cm prometheus-oper-istio-dashboards grafana_dashboard=1popd

重启 Grafana 的 pod，你将在 Grafana 中看到以下的仪表盘。

作者：Sebastien Thomas，Tetrate 的工程师和基础设施 Macgyver，专长 Istio 设置和支持。