创建部署问题时,请参考下面模板,你提供的信息越多,越容易及时获得解答。如果未按模板创建问题,管理员有权关闭问题。
确保帖子格式清晰易读,用 markdown code block 语法格式化代码块。
你只花一分钟创建的问题,不能指望别人花上半个小时给你解答。

操作系统信息
虚拟机,Ubuntu18.04,8G

Kubernetes版本信息
kubectl version 命令执行结果贴在下方
Client Version: version.Info{Major:“1”, Minor:“23”, GitVersion:“v1.23.15”, GitCommit:“b84cb8ab29366daa1bba65bc67f54de2f6c34848”, GitTreeState:“clean”, BuildDate:“2022-12-08T10:49:13Z”, GoVersion:“go1.17.13”, Compiler:“gc”, Platform:“linux/amd64”}

Server Version: version.Info{Major:“1”, Minor:“23”, GitVersion:“v1.23.15”, GitCommit:“b84cb8ab29366daa1bba65bc67f54de2f6c34848”, GitTreeState:“clean”, BuildDate:“2022-12-08T10:42:57Z”, GoVersion:“go1.17.13”, Compiler:“gc”, Platform:“linux/amd64”}

容器运行时

# docker version

Client:

Version: 24.0.9

API version: 1.43

KubeSphere版本信息

KubeSphere v3.4.1 离线安装 kk安装

问题是什么
报错日志是什么,最好有截图。

执行kubectl get pods -A -o wide命令结果:

执行kubectl describe pods pod ks-apiserver-66566bf676-5gg9x -n kubesphere-system命令结果:

执行kubectl logs -f ks-apiserver-66566bf676-5gg9x -n kubesphere-system命令结果:

执行kubectl get secrets --all-namespaces命令结果:

服务部署几个月了,今天发现无法登陆,于是我使用delete pod --all --force --grace-period=0 -n kubesphere-system命令将相关服务都删除重启了,然后就出现了上面的问题,在网上搜索解决方法未果。

我自己分析,关键的信息在apiserver启动日志中:"command failed" err="failed to create cache, error: ERR invalid password"
我个人判断是apiserver连接redis密码错误了,但看apiserver和redis的环境变量:

Environment:

KUBESPHERE_CACHE_OPTIONS_PASSWORD: <set to the key 'auth' in secret 'redis-secret'> Optional: false
都是配置了redis-secret,应该不存在不一致的情况

使用网上搜到的kubectl get secrets --all-namespaces命令查看发现redis-secret也是存在的。现在不知道下一步该怎么排查和处理了,各位大佬帮忙看看,是否遇到过类似问题。