CentOS與Kubernetes的存儲解決方案

在CentOS與Kubernetes環境中，有多種存儲解決方案可供選擇，以滿足不同的數據存儲需求和場景。以下是一些常見的存儲解決方案及其配置方法：

1. NFS存儲

• 在CentOS上安裝NFS服務器：

  1. 安裝NFS服務器軟件包：

     sudo yum install -y nfs-utils
     

  2. 配置NFS共享目錄：

     sudo mkdir -p /mnt/nfssudo groupadd nogroupsudo chown -R nobody:nogroup /mnt/nfs
     

  3. 配置NFS導出文件： 編輯 /etc/exports 文件，添加共享目錄：

     /mnt/nfs *(rw,sync,no_subtree_check)
     

  4. 啟動并啟用NFS服務：

     sudo systemctl start nfs-serversudo systemctl enable nfs-server
     

  5. 導出共享目錄：

     sudo exportfs -a
     

  6. 配置防火墻：

     sudo firewall-cmd --permanent --add-service=nfssudo firewall-cmd --permanent --add-service=mountdsudo firewall-cmd --permanent --add-service=rpc-bindsudo firewall-cmd --reload
     

  7. 檢查NFS狀態：

     sudo systemctl status nfs-server
     

• 在Kubernetes中使用NFS存儲： 創建PersistentVolume和PersistentVolumeClaim，讓Kubernetes Pod掛載NFS共享。

2. Ceph存儲

• 準備工作：
  • Kubernetes集群版本1.22+，至少3個節點。
  • Ceph存儲節點：每個節點至少4GB內存和20GB存儲。
  • 操作系統：CentOS 7+。
• 安裝必要工具：

  kubectl helm repo add rook-release https://charts.rook.io/release
  helm repo update
  

• 部署Ceph Operator：

  kubectl create namespace rook-ceph
  helm install rook-ceph rook-release/rook-ceph --namespace rook-ceph
  

• 驗證Operator狀態：

  kubectl get pods -n rook-ceph
  

• 配置Ceph集群： 創建存儲節點配置文件并應用：

  kubectl apply -f - <<EOF
  apiVersion: ceph.rook.io/v1
  kind: CephCluster
  metadata:
    name: rook-ceph
    namespace: rook-ceph
  spec:
    cephVersion:
      image: ceph/ceph:v16.2.6
    allowUnsupported: false
    dataDirHostPath: /var/lib/rookstorage
    useAllNodes: true
    useAllDevices: false
    devices:
    - name: /dev/sdb
      network:
        hostNetwork: false
  EOF
  

• 驗證Ceph集群狀態：

  kubectl -n rook-ceph get cephcluster
  

3. SAN存儲

• 服務端配置：

  1. 安裝必要軟件：

     sudo yum install scsi-target-utils
     

  2. 查看磁盤信息：

     fdisk -l
     

  3. 分區和格式化：

     fdisk /dev/sdb
     mkfs.ext4 /dev/sdb1
     

  4. 配置共享存儲分區： 編輯 /etc/tgt/targets.conf 文件，增加共享存儲配置。
  5. 重啟tgtd服務：

     systemctl restart tgtd
     

  6. 驗證目標狀態：

     tgt-admin --show
     

• 客戶端配置：

  1. 安裝iscsi-initiator-utils：

     sudo yum install iscsi-initiator-utils
     

  2. 發現并登錄目標：

     iscsiadm -m discovery -t sendtargets -p [目標服務器IP]
     iscsiadm -m node -T [iqn名稱] --login
     

  3. 查看已連接的目標：

     iscsiadm -m session
     

  4. 掛載存儲： 創建掛載點目錄并掛載iSCSI目標。 編輯 /etc/fstab 文件，設置自動掛載。

4. Kubernetes原生存儲

• 選擇合適的存儲解決方案： 根據需求選擇合適的存儲解決方案，如IOMesh、Longhorn、OpenEBS、Portworx等。

通過以上步驟，您可以在CentOS與Kubernetes環境中配置和使用不同的存儲解決方案，以滿足您的數據存儲需求。每種存儲解決方案都有其獨特的優勢和適用場景，建議根據具體需求進行選擇和配置。