创建部署问题时,请参考下面模板,你提供的信息越多,越容易及时获得解答。如果未按模板创建问题,管理员有权关闭问题。
确保帖子格式清晰易读,用 markdown code block 语法格式化代码块。
你只花一分钟创建的问题,不能指望别人花上半个小时给你解答。
操作系统信息
虚拟机,Ubuntu18.04,8G
Kubernetes版本信息
将 kubectl version
命令执行结果贴在下方
Client Version: version.Info{Major:“1”, Minor:“23”, GitVersion:“v1.23.15”, GitCommit:“b84cb8ab29366daa1bba65bc67f54de2f6c34848”, GitTreeState:“clean”, BuildDate:“2022-12-08T10:49:13Z”, GoVersion:“go1.17.13”, Compiler:“gc”, Platform:“linux/amd64”}
Server Version: version.Info{Major:“1”, Minor:“23”, GitVersion:“v1.23.15”, GitCommit:“b84cb8ab29366daa1bba65bc67f54de2f6c34848”, GitTreeState:“clean”, BuildDate:“2022-12-08T10:42:57Z”, GoVersion:“go1.17.13”, Compiler:“gc”, Platform:“linux/amd64”}
容器运行时
# docker version
Client:
Version: 24.0.9
API version: 1.43
KubeSphere版本信息
KubeSphere v3.4.1 离线安装 kk安装
问题是什么
报错日志是什么,最好有截图。
执行kubectl get pods -A -o wide
命令结果:
执行kubectl describe pods pod ks-apiserver-66566bf676-5gg9x -n kubesphere-system
命令结果:
执行kubectl logs -f ks-apiserver-66566bf676-5gg9x -n kubesphere-system
命令结果:
执行kubectl get secrets --all-namespaces
命令结果:
服务部署几个月了,今天发现无法登陆,于是我使用delete pod --all --force --grace-period=0 -n kubesphere-system
命令将相关服务都删除重启了,然后就出现了上面的问题,在网上搜索解决方法未果。
我自己分析,关键的信息在apiserver启动日志中:"command failed" err="failed to create cache, error: ERR invalid password"
,
我个人判断是apiserver连接redis密码错误了,但看apiserver和redis的环境变量:
Environment:
KUBESPHERE_CACHE_OPTIONS_PASSWORD: <set to the key 'auth' in secret 'redis-secret'> Optional: false
都是配置了redis-secret
,应该不存在不一致的情况
使用网上搜到的kubectl get secrets --all-namespaces
命令查看发现redis-secret
也是存在的。现在不知道下一步该怎么排查和处理了,各位大佬帮忙看看,是否遇到过类似问题。