背景

原来使用 kubesphere 一键安装脚本部署，测试使用期间 Kubesphere 出问题，虽然没有影响 k8s 集群，但 Kubesphere 系统已不可用；

[问题] 不影响 k8s 集群的状态下，如何重装 kubesphere ?

要解决上述问题，最好能独立部署 k8s，然后再独立部署 Kubesphere；

解决方案

kubeasz 实现 k8s 部署，通过 ks-installer 项目部署 KubeSphere；
测试 kubesphere 的部署和重装

版本信息:

kubeasz: 2.0.2
kubesphere: 2.1.0
k8s: v1.15.0

安装步骤

基础架构

主机角色	IP地址
master01	10.10.14.108
master02	10.10.14.109
master03	10.10.14.110
node01	10.10.14.102
node02	10.10.14.133
node03	10.21.18.206
node04	10.21.18.206

免密登录
master01 中控机对其他主机免密登录，方便 ansible 执行
准备 kubeasz 环境

# 下载工具脚本easzup，举例使用kubeasz版本2.0.2
export release=2.0.2
curl -C- -fLO --retry 3 https://github.com/easzlab/kubeasz/releases/download/${release}/easzup
chmod +x ./easzup
# 使用工具脚本下载
./easzup -D

修改配置文件：

# 
cp /etc/ansible/example/hosts.multi-node /etc/ansible/hosts
# 修改 hosts 清单如下

CONTAINER_RUNTIME="containerd"

# Network plugins supported: calico, flannel, kube-router, cilium, kube-ovn
CLUSTER_NETWORK="calico"

# K8S Service CIDR, not overlap with node(host) networking
SERVICE_CIDR="10.68.0.0/16"

[all:vars]
# --------- Main Variables ---------------
# Cluster container-runtime supported: docker, containerd
CONTAINER_RUNTIME="containerd"

# Network plugins supported: calico, flannel, kube-router, cilium, kube-ovn
CLUSTER_NETWORK="calico"

# K8S Service CIDR, not overlap with node(host) networking
SERVICE_CIDR="10.68.0.0/16"

# Cluster CIDR (Pod CIDR), not overlap with node(host) networking
CLUSTER_CIDR="10.233.0.0/16"

kubeasz 部署 k8s 集群

ansible-playbook 90.setup.yml

# 此处会遇见问题
# 如果主机使用 Kubesphere 一键安装脚本部署过集群，再使用 kubeasz 部署 k8s 时，docker 安装时会有包依赖冲突；需要自行解决；

helm 之伤
kubeasz 默认配置中没有部署 helm，可通过执行如下命令安装：

ansible-playbook roles/helm/helm.yml

通过这种方式部署的 helm，再部署 Kubesphere 时会有问题；
异常详情见: https://kubesphere.com.cn/forum/d/711-ks-installer-helm

所以，helm 的部署手动完成，参考：https://devopscube.com/install-configure-helm-kubernetes/

安装 nfs-client

参考如下链接，我这边部署过程中，使用 helm 部署 nfs-client 时没有测试通过；
可以按照仓库文档，手动部署 class.yaml, rbac.yaml, deployment.yaml 即可
https://github.com/kubernetes-incubator/external-storage/tree/master/nfs-client

按照 ks_installer 的部署方式安装
参考如下配置:
https://github.com/kubesphere/ks-installer/blob/master/README_zh.md
部署过程在需要注意，由于 kubeasz 部署的 etcd 未配置证书；所以只需要创建空的 secret；

kubectl -n kubesphere-monitoring-system create secret generic kube-etcd-client-certs

其他配置按照 kubesphere 的官方文档操作即可;

测试 Kubesphere 卸载重装

卸载 Kubesphere
kubectl delete -f https://raw.githubusercontent.com/kubesphere/ks-installer/master/kubesphere-minimal.yaml
卸载后
卸载后，集群仅将 kubesphere-system 命名空间清空，其他组件继续保留；
重装后，Kubesphere 中的原配置消失；

改善建议

KubeSphere 作为 k8s 集群的管理软件，就像 linux 系统的桌面系统一样。设计思路可仿抄linux桌面；

KubeSphere 的卸载安装，不影响 k8s 集群
KubeSphere 卸载后，所有配置需要另存，重装后可恢复应用
KubeSphere 的各组件需要继续解耦，可独立装卸最佳；