监控数据失效

ulcadmin

frezes

ulcadmin
pod 监控没有数据检查下 kubelet的 cadvisor 指标暴露是否正常，可以将 Prometheus 对外暴露，查看下 Prometheus console 的 target 中是否有 unhealthy 的 target，可以尝试重启下对应节点 kubelet 试下

ulcadmin

frezes 这个我暴露了但是没找到你说的cadvisor指标，其他的都是正常的，没有unhealthy 的 target

frezes

ulcadmin

你看看这个 job 是否正常

frezes

frezes
以及查询下这个指标是否正常

ulcadmin

frezes

这里一切正常

ulcadmin

frezes

这个值为空

frezes

ulcadmin
你别加上我的节点名称，你把 node="kse-core" 去掉

ulcadmin

frezes

那是有的有很多我ks界面上是有些pod有监控数据，大部分没

之前都是正常的，重启过机器后成这样了，但是节点监控是正常的

frezes

ulcadmin
你看下没有Pod 监控的节点，将 node 过滤条件加上 node=“xxx”，是不是这些节点没有对应指标？

ulcadmin

frezes 三个节点是有数据返回的，我找了两个不显示监控的pod，发现也是有数据返回

frezes

ulcadmin
同步下 Kubesphere 版本，我们用页面调用的PromQL 看下是哪里有问题

ulcadmin

frezes 平台版本：3.3.2

frezes

ulcadmin
round(sum by (namespace, pod) (irate(container_cpu_usage_seconds_total{job="kubelet", pod!="", image!=""}[5m])) * on (namespace, pod) group_left(owner_kind, owner_name) kube_pod_owner{} * on (namespace, pod) group_left(node) kube_pod_info{namespace="xxxx",pod="XXX"}, 0.001)

将 namespace=“xxxx”,pod=“XXX” 替换为实际的 Pod 信息

ulcadmin

frezes 找不

ulcadmin

frezes 我又试了下监控界面有返回的pod这里是有数据返回的

frezes

ulcadmin
那就把 Promql 拆分下，看那部分没有改指标
sum by (namespace, pod) (irate(container_cpu_usage_seconds_total{job=“kubelet”, pod!="“, image!=”", namespace=“xxx”,pod=“XXX”}[5m]))
kube_pod_info{namespace=“xxxx”,pod=“XXX”}
kube_pod_owner{namespace=“xxxx”,pod=“XXX”}

ulcadmin

frezes 这样三个分别都是有数据返回的

« 上一页