k8s笔记24--安装metrics-server及错误处理

阿里云国内75折回扣微信号：monov8

阿里云国际，腾讯云国际，低至75折。AWS 93折免费开户实名账号代冲值优惠多多微信号：monov8 飞机：@monov6

k8s笔记24--安装metrics-server及错误处理

1 介绍
2 安装
3 常见错误
- 第一次错误持续 Failed probe
- 第二次错误 bad status code "403 Forbidden"
4 说明

1 介绍

最近一个同事在老版本的 k8s 上安装metrics-serverpod一直处于running 非就绪状态经过查看发现存在 tls 、软件版本、资源权限等问题。记录在此处以便于后续查阅、同类问题续更。

2 安装

参考官方文档 kubernetes-sigs/metrics-server 执行如下命令即可

kubectl apply -f https://github.com/kubernetes-sigs/metrics-server/releases/latest/download/components.yaml

注意事项

如果需要忽略 Kubelet certificate name只需要在 deployment 的containers.args 中加上 –kubelet-insecure-tls 即可
如果在国内需要将镜像仓库更改为国内的源例如阿里云的例如将 8s.gcr.io/metrics-server/metrics-server 更改为 registry.aliyuncs.com/google_containers/metrics-server
需要关注k8s 和 metrics-server 版本对应关系高版本的server可能不兼容低版本的k8s集群
需要确认最新 components.yaml 中授权是不是满足需求

3 常见错误

笔者最近在 k8s 1.18.0 版本上安装 metrics-server, 先后报了两种错具体如下

第一次错误持续 Failed probe

持续报错如下检查参数发现都正常最后发现1.18.0 和 metrics-server 6.x.x 不匹配将其更改为 0.5.0 后报错发生改变了
Compatibility Matrix

Metrics Server	Metrics API group/version	Supported Kubernetes version
0.6.x	metrics.k8s.io/v1beta1	1.19+
0.5.x	metrics.k8s.io/v1beta1	*1.8+
0.4.x	metrics.k8s.io/v1beta1	*1.8+
0.3.x	metrics.k8s.io/v1beta1	1.18-1.21+

I0209 06:41:27.899879       1 server.go:187] "Failed probe" probe="metric-storage-ready" err="no metrics to serve"
I0209 06:41:37.899853       1 server.go:187] "Failed probe" probe="metric-storage-ready" err="no metrics to serve"

第二次错误 bad status code “403 Forbidden”

将版本更改为0.5.0 后持续报错403错误根据提示 /stats/summary 发现可能是权限不够检查发现最新的 components.yaml (截止2023-02-09) 中ClusterRole中只有nodes/metrics权限缺少 nodes/stats 权限因此手动添加权限后重新部署就恢复正常。

I0209 06:54:30.425470       1 server.go:188] "Failed probe" probe="metric-storage-ready" err="not metrics to serve"
E0209 06:54:34.737196       1 scraper.go:139] "Failed to scrape node" err="GET \"https://172.22.0.139:10250/stats/summary?only_cpu_and_memory=true\": bad status code \"403 Forbidden\"" node="cnshc-map-p01012"
E0209 06:54:34.743811       1 scraper.go:139] "Failed to scrape node" err="GET \"https://172.22.0.67:10250/stats/summary?only_cpu_and_memory=true\": bad status code \"403 Forbidden\"" node="cnshc-map-p01041"
I0209 06:54:40.425528       1 server.go:188] "Failed probe" probe="metric-storage-ready" err="not metrics to serve"
E0209 06:54:49.734943       1 scraper.go:139] "Failed to scrape node" err="GET \"https://172.22.0.67:10250/stats/summary?only_cpu_and_memory=true\": bad status code \"403 Forbidden\"" node="cnshc-map-p01041"
E0209 06:54:49.749762       1 scraper.go:139] "Failed to scrape node" err="GET \"https://172.22.0.139:10250/stats/summary?only_cpu_and_memory=true\": bad status code \"403 Forbidden\"" node="cnshc-map-p01012"
I0209 06:54:50.425584       1 server.go:188] "Failed probe" probe="metric-storage-ready" err="not metrics to serve"