Nginx Ingress 暴露没有定义Host的ingress的Metrics数据

eUBiIdHz0

指定默认的 ingress 后端

名字有点绕口，假如说之前有个服务是通过 ip:port 来访问 nginx(就是 default server)，然后转发到后端服务的，那么转换成 ingress 后，不能指定 host，不然会匹配不到规则。ingress 就不能配置 host，创建出来的 ingress 资源就是这样的：

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19

apiVersion: networking.k8s.io/v1beta1 kind: Ingress metadata:   annotations:     nginx.ingress.kubernetes.io/ssl-redirect: "false"   name: g.example.com   namespace: default spec:   rules:   - http:       paths:       - backend:           serviceName: server1           servicePort: 5003         path: /sdk       - backend:           serviceName: server2           servicePort: 8665         path: /tsp

创建出来的 ingress 资源显示：

1 2 3

[root@VM_233_33_centos new]# kubectl get ingress NAME                               HOSTS   ADDRESS        PORTS   AGE g.example.com                      *       10.13.255.17   80      4h40m

metrics 监控指标问题

因为上面我们创建了一个 ingress，但是没有指定 host，在 ingress-nginx 中，没有 host 的 ingress 的 metrics 指标是不收集的，代码在此：https://github.com/kubernetes/ingress-nginx/blob/d82585917c845e598a2cd5d2c4291ce891b5e5b4/internal/ingress/metric/collectors/socket.go#L233-L235

GitHub 上有很多对应的 issues，比如：https://github.com/kubernetes/ingress-nginx/issues/5755 和 https://github.com/kubernetes/ingress-nginx/issues/3713

这里有个修复链接，https://github.com/kubernetes/ingress-nginx/pull/4139 理论上在这个时间之后的版本就已经修复了，需要添加启动参数：--metrics-per-host=false， yml 文件如下（部分内容精简）：

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27

# Source: ingress-nginx/templates/controller-deployment.yaml apiVersion: apps/v1 kind: Deployment spec:   replicas: 3     spec:       dnsPolicy: ClusterFirst       containers:         - name: controller           image: k8s.gcr.io/ingress-nginx/controller:v0.35.0@sha256:fc4979d8b8443a831c9789b5155cded454cb7de737a8b727bc2ba0106d2eae8b           imagePullPolicy: IfNotPresent           lifecycle:             preStop:               exec:                 command:                   - /wait-shutdown           args:             - /nginx-ingress-controller             - --election-id=ingress-controller-leader             - --ingress-class=nginx             - --configmap=$(POD_NAMESPACE)/ingress-nginx-controller             - --validating-webhook=:8443             - --validating-webhook-certificate=/usr/local/certificates/cert             - --validating-webhook-key=/usr/local/certificates/key             - --default-backend-service=$(POD_NAMESPACE)/ingress-nginx-default-backend             - --metrics-per-host=false ...

然后等待重启完成，既可看到监控指标：需要注意标签的变化，grafana 中也需要做相应的修改。