脚本就卡在这里了，

deployment.apps/ks-installer scaled

etcd endpointIps is empty or localhost, will be filled with

clusterconfiguration.installer.kubesphere.io/ks-installer patched (no change)

remove redis

No resources found

No resources found

No resources found

No resources found

No resources found

No resources found

apply CRDs

job.batch “prepare-upgrade” deleted

configmap/ks-upgrade-prepare-config unchanged

job.batch/prepare-upgrade created

查看资源运行情况

xingxing122

检查一下 prepare-upgrade-xxxx pod 的 imagePullPolicy，镜像更新了没

    image: docker.io/kubesphere/ks-upgrade:v4.1.3
    imageID: docker.io/kubesphere/ks-upgrade@sha256:bbdc80bbcab3f87b020af43d177c28425af593e103133ec6defdab9488dfb3a3

      • hongmingK零SK壹S

      • 发布 #32
      • 已编辑

      xingxing122

      确认一下 image hash 是否一致，我这能复现你遇到的问题，修复后也重新验证过， 相关问题的修复记录 https://github.com/kubesphere/ks-upgrade/pull/27/files#diff-a539a85bdf77e6a269d56942c9ce3f56b0e1a0d33cf1ccd03ba6081f582a17dbR429

      这一行的空指针加了前置判断，环境中配置的差异会被忽略

      	/workspace/pkg/jobs/core/core.go:429 +0x22f

      请提供一下最新的日志信息，可能不是这里产生的错误了

        xingxing122

        只能尽可能减少环境的差异，有一些特殊配置在升级过程中可能没有被覆盖到，但能根据异常日志定位到错误 https://github.com/kubesphere/ks-upgrade，比如你遇到的这个空指针问题，就可以稍微调整一下 validatingwebhook 的配置跳过

          镜像是一致的呢，我只是打的tag 传到的仓库而已，因为mac M1 系列的本地是拉取不到arm的镜像，所以需要传到我仓库去

            xingxing122

            是不是 retag 的时候搞错了，改了 imagePullPolicy也没拉到更新后的镜像，日志中的错误信息已经足够定位问题，你也可以自己去构建镜像试试。如果觉得麻烦，可以这么跳过，把导致异常的 validatingwebhook 先备份删除，升级完成后再恢复

                hongming tag 不应该的，毕竟后面的imageID 都是一致的， 把异常的validatingwebhook 备份删除，这个操作有点麻烦，咋跳过，咋跳过呢

                    xingxing122

                    这个 imageID 看起来也是一致的，也是对的，但这是 x86 的，kubesphere/ks-upgrade 并没有提供 arm 镜像，你看看 prepare-upgrade 的 pod 实际拉取的是哪个呢，还有就是异常日志有没有变化，排除其它问题导致中断

                        hongming 我看了日志报错，还是那个nil 要不然就需要删除 这些，但是我觉得还是跳过比较多，我尝试使用github 上制作镜像试试

                        kubectl get validatingwebhookconfigurations | grep kubesphere

                        cluster.kubesphere.io 1 19h

                        network.kubesphere.io 1 19h

                        resourcesquotas.quota.kubesphere.io 1 19h

                        rulegroups.alerting.kubesphere.io 3 19h

                        storageclass-accessor.storage.kubesphere.io 1 19h

                        users.iam.kubesphere.io 1 19h

                            xingxing122 我拉取了master 分支，打的镜像还是有问题，这个问题修复是在那个分支搞的

                                • hongmingK零SK壹S

                                • 发布 #40
                                • 已编辑

                                xingxing122

                                是 master 分支，这一行改动一目了然，只有 ClientConfig.Service 是指针类型

                                你再检查一下 pod，看看 imagePullPolicy 改过了吗

                                    • bwcx

                                      • 发布 #41

                                      升级网关 failed to get API group resources: unable to retrieve the complete list of server APIs: gateway.kubesphere.io/v2alpha1: the server could not find the requested resource

                                        bwcx

                                        member 集群上的网关升级，要等集群污点移除后，Gateway 扩展组件调度成功之后再执行。

                                        • bwcx 回复了此帖

                                            bwcx

                                            host 集群上也要等待扩展组件调度，可以通过UI 检查一下网关扩展组件的调度状态，或者通过以下命令：

                                            kubectl get installplan gateway -o json | jq -r '["Cluster", "State"], (.status.clusterSchedulingStatuses | to_entries[] | [.key, .value.state]) | @tsv' | column -t
                                            • bwcx 回复了此帖

                                                hongming 改动了，我拉去master 分支自己在本地打了一个镜像

                                                  • bwcx

                                                    • 发布 #46
                                                    • 已编辑

                                                    hongming
                                                    Cluster State
                                                    host Installed

                                                    gateway-agent-backend-controller-manager 日志

                                                    • bwcx 回复了此帖

                                                        • bwcx

                                                          • 发布 #47
                                                          • 已编辑

                                                          bwcx 装好了，我把 WhizardTelemetry 监控安装好就安装成功了。不过安装 WhizardTelemetry 监控也报错了。把 kubesphere-monitoring-system 命名空间删除重新装才成功。
                                                          然后网关页面报错