ceph csi 无法指定Block

xiaolidw23456

kubesphere不能指定Block？只能To create a file-system-based PersistentVolumeClaim that utilizes the ceph-csi-based StorageClass created above？

kevendeng

xiaolidw23456
目前ks-console创建存储卷确实不会指定fileMode，从而会让k8s选择默认的filesystem模式，如果需要使用block模式，目前只能手动创建
不过要注意ceph的rbd block虽然支持rwx，但如果你将其作为文件系统使用，多节点挂载同样会导致问题
建议更换使用cephfs

xiaolidw23456

kevendeng Ceph CSI is a Container Storage Interface (CSI) driver for RBD, CephFS.

xiaolidw23456

如果用cephfs插件 kubesphere支持吗？官网没看到这个文档，只有ceph csi rbd &ceph rbd

kevendeng

xiaolidw23456 你的ceph是怎么装的？rook吗

xiaolidw23456

kevendeng ceph-deploy安装，这个安装ceph csi就不支持？

kevendeng

xiaolidw23456
存储系统是独立运行，与KS无关的，无论你怎么部署都可以支持。
你现在需要再增加一个CephFS CSI的支持，自己参考Ceph CSI的文档部署一个CSI driver吧：https://github.com/ceph/ceph-csi

xiaolidw23456

kevendeng已经增加了ceph csi部署，按照官网部署的，：https://v3-1.docs.kubesphere.io/zh/docs/installing-on-linux/persistent-storage-configurations/install-ceph-csi-rbd/，官网说ceph-csi包含CephFS.但按官网部署后只能单节点，多节点报错，用 kubectl指定block可以。

kevendeng

xiaolidw23456
虽然ceph-deploy/cephadm/rook/ceph-csi等项目让Ceph在K8S上的部署使用非常容易了，但一些基本的概念如RADOS/OSD/MON/MDS/RBD、CSI、StorageClass以及它们之间的关系还是必须要搞清楚的。
建议你先看文档理解了这些概念再使用，比起胡乱尝试效率要高一些。

Ceph-CSI当然支持CephFS，但KS官网里Ceph CSI部分的文档仅以它的RBD组件为例，如果你仔细阅读而不是简单粘贴了官网示例里的每个yaml文件，应该能理解这一点。

暂且不考虑你是否部署了Ceph-CSI的CephFS组件，以及是否部署并配置好了Ceph的MDS组件，你现在使用的是RBD的SC，自然不能创建出CephFS的存储卷。

要注意Ceph是一个组件较为复杂的系统，选择Ceph作为生产环境的存储系统，一定要有足够的运维能力。

xiaolidw23456

kevendeng 没说到点上，官网说ceph csi包含cephfd,而且官网给的配置也是ceph csi，怎么配置cephfs???

xiaolidw23456

kevendeng 本来准备搭建cephfs，官网没有这个CEPHfs配置啊，误导性很大啊，总不能自己编辑cehfs吧？难道官网都没有测试？？？

kevendeng

xiaolidw23456
Ceph-CSI包含CephFS、RBD两种组件，而官网仅仅是以其中的RBD组件为例演示了如何使用Ceph，至于CephFS如何使用、如何配置，仅需参考Ceph-CSI文档类推即可。你选择了Ceph，就需要自己学会如何使用。Ceph是独立于KS存在的组件，ceph/ceph-deploy/ceph-csi也都有现成的文档，我们没有义务手把手地将它们的所有使用情况都写在KS文档中。

xiaolidw23456

kevendeng 所以文档不写清楚啊，备注都没有，没写阅读的人以为不支持。。。

kevendeng

xiaolidw23456