news 2026/4/24 18:58:19

k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

问题描述

k8s 环境有天主机故障关机了很长时间,但是没有执行 kubectl delete node 【nodename】剔除节点,过了一段时间发现KubeNodeNotReadyKubeNodeUnreachable这两个告警在恢复和告警之间切换,这明显不正常,因为节点都已经关机,怎么可能恢复。

排查步骤

经过排查才发现是kube_node_status_condition{node="nodename"}这个指标时断时续(偶尔指标缺失),问题就是指标缺失造成的(指标缺失就认定为告警恢复)。

然后查看kube-state-metrics pod的日志发现如下错误,prometheus pod未发现错误日志。

E122007:28:28.0369131metrics_handler.go
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/19 0:55:57

铝合金三通阀体金属型重力铸造数值模拟与优化

铝合金三通阀体金属型重力铸造数值模拟与优化 本研究针对铝合金三通阀体金属型重力铸造工艺,采用Box-Behnken试验设计方法,以浇注时间、浇注温度、模具温度和铸件传热系数为变量,缩松缩孔体积和二次枝晶臂间距为优化目标,通过数值模拟与NSGA-Ⅱ多目标优化算法获得最优工艺…

作者头像 李华
网站建设 2026/4/13 12:39:11

23、服务器高可用性之故障转移集群配置全解析

服务器高可用性之故障转移集群配置全解析 1. 利用 PowerShell 配置 NLB 集群 在配置网络负载均衡(NLB)集群时,PowerShell 提供了一系列实用的 cmdlet。若要查看与 NLB 相关的完整 PowerShell cmdlet 列表,可在命令行输入 Get-Command *nlb* 。以下是一些常用的 NLB 集群…

作者头像 李华
网站建设 2026/4/23 20:07:30

Linly-Talker镜像通过ISO信息安全认证

Linly-Talker镜像通过ISO信息安全认证 在金融、政务、医疗等行业对数据安全要求日益严苛的今天,一个数字人系统即便再智能,若无法确保用户信息“不出内网”,就很难真正落地。而最近,一款名为 Linly-Talker 的“一站式数字人对话系…

作者头像 李华
网站建设 2026/4/23 12:55:53

Linly-Talker在养老院陪伴老人的应用探索

Linly-Talker在养老院陪伴老人的应用探索 在全球老龄化加速的今天,许多国家和地区正面临一个共同难题:老年人口持续增长,而专业护理资源却捉襟见肘。护工短缺、服务成本高企、情感支持不足——这些问题不仅困扰着养老机构,也让无数…

作者头像 李华
网站建设 2026/4/18 13:09:59

21、Active Directory 对象管理与计算机账户管理全解析

Active Directory 对象管理与计算机账户管理全解析 1. Active Directory 对象重命名与移动 在 Active Directory 中,重命名和移动对象可以使用 DSMOVE 命令。这是因为重命名对象实际上就是将其从当前的可分辨名称(DN)移动到新的 DN。DN 由通用名称(RDN)和位置两部分组…

作者头像 李华
网站建设 2026/4/22 1:22:07

Linly-Talker支持HTTPS加密传输吗?保障数据安全

Linly-Talker 支持 HTTPS 加密传输吗?数据安全的底层逻辑 在今天这个万物互联的时代,AI 数字人早已不再是实验室里的概念玩具。从直播间里24小时不打烊的虚拟主播,到银行客服端口耐心解答问题的数字员工,Linly-Talker 这类集成了大…

作者头像 李华