news 2026/6/15 13:41:22

k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

问题描述

k8s 环境有天主机故障关机了很长时间,但是没有执行 kubectl delete node 【nodename】剔除节点,过了一段时间发现KubeNodeNotReadyKubeNodeUnreachable这两个告警在恢复和告警之间切换,这明显不正常,因为节点都已经关机,怎么可能恢复。

排查步骤

经过排查才发现是kube_node_status_condition{node="nodename"}这个指标时断时续(偶尔指标缺失),问题就是指标缺失造成的(指标缺失就认定为告警恢复)。

然后查看kube-state-metrics pod的日志发现如下错误,prometheus pod未发现错误日志。

E122007:28:28.0369131metrics_handler.go
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/14 21:25:48

Linly-Talker能否用于学校升旗仪式主持?

Linly-Talker能否用于学校升旗仪式主持? 在清晨的校园操场上,国旗缓缓升起,学生们整齐列队。传统上,升旗仪式由学生或教师担任主持人,用略显紧张的声音念出早已背熟的稿子——这场景我们再熟悉不过。然而,随…

作者头像 李华
网站建设 2026/6/14 17:29:46

质数筛-埃氏筛

质数的定义:只能被 1 和它自身整除的数优势相比于暴力的筛法,埃氏筛的算法效率要快不少,虽然比起欧拉筛来说,埃氏筛的优化仍然有待提高。但比起欧拉筛,埃氏筛的理解难度要小不少。埃氏筛介绍埃氏筛的时间复杂度在O()我…

作者头像 李华
网站建设 2026/6/14 20:52:02

Linly-Talker支持音频降噪预处理吗?提升ASR效果

Linly-Talker 支持音频降噪预处理吗?提升 ASR 效果的实战解析 在会议室空调嗡鸣、街头车流喧嚣或家庭环境中键盘敲击声此起彼伏的现实场景里,数字人系统能否“听清”用户说话,往往决定了它究竟是智能助手还是“人工智障”。语音识别&#xff…

作者头像 李华
网站建设 2026/6/15 3:28:43

Linly-Talker语音断句优化:长句子自然停顿处理策略

Linly-Talker语音断句优化:长句子自然停顿处理策略 在虚拟主播直播带货、AI教师在线授课、数字客服全天候服务的今天,用户早已不再满足于“能说话”的机器人。他们期待的是一个会思考、懂节奏、能倾听、可互动的类人存在。然而现实是,许多数字…

作者头像 李华
网站建设 2026/6/15 11:28:27

20、NetBIOS编程在Windows NT环境中的深入解析与应用

NetBIOS编程在Windows NT环境中的深入解析与应用 NetBIOS(Network Basic Input/Output System)是一种用于网络通信的API,在Windows NT环境中有着广泛的应用。它为不同的应用程序提供了一个统一的接口,使得它们能够在网络上进行通信。下面我们将详细探讨NetBIOS在Windows N…

作者头像 李华
网站建设 2026/6/15 11:29:42

Linly-Talker支持语音增益自动调节吗?

Linly-Talker 支持语音增益自动调节吗? 在构建实时数字人系统的今天,一个常被忽视却至关重要的问题浮出水面:当用户轻声细语、突然靠近麦克风,或身处嘈杂环境时,系统能否“听清”并准确响应?这背后不仅依赖…

作者头像 李华