如何優化centos k8s部署性能

優化CentOS上的Kubernetes（k8s）部署性能涉及多個方面，包括節點配置、網絡優化、存儲優化、容器運行參數優化等。以下是一些關鍵的優化步驟和建議：

節點配額和內核參數調整

• 增加文件句柄限制：fs.file-max=1000000
• 配置ARP緩存大小：
  • net.ipv4.neigh.default.gc_thresh1=1024
  • net.ipv4.neigh.default.gc_thresh2=4096
  • net.ipv4.neigh.default.gc_thresh3=8192
• 允許的最大跟蹤連接條目：net.netfilter.nf_conntrack_max=10485760
• 哈希表大小：net.core.netdev_max_backlog=10000
• 允許的最大inotify實例數量：fs.inotify.max_user_instances=524288
• 允許的每個inotify實例相關聯的watches數量：fs.inotify.max_user_watches=524288

Etcd數據庫優化

• 搭建高可用的etcd集群：使用etcd operator來簡化管理
• 配置etcd使用SSD固態盤存儲
• 增大etcd的存儲限制：設置--quota-backend-bytes

Kube APIServer配置

• 根據節點數量調整kube APIServer的配置，例如：
  • max-requests-inflight和max-mutating-requests-inflight

網絡優化

• 解決conntrack問題：通過增加NodePort節點、修改service為LoadBalancer或使用Ingress進行負載均衡來減少五元組轉換帶來的瓶頸

存儲優化

• 設置磁盤IO調度算法：例如，使用noop或deadline

容器運行參數優化

• 調整Docker參數：
  • exec-opts：["native.cgroupdriversystemd"]
  • log-driver：json-file
  • log-opts：{ "max-size": "100m" }
  • storage-driver：overlay2

其他優化建議

• 關閉防火墻和selinux：臨時關閉用于性能考慮，永久關閉需要修改配置文件
• 關閉swap：臨時關閉用于性能考慮，永久關閉需要修改配置文件
• 配置國內yum源：使用國內鏡像源加速鏡像下載

通過上述優化措施，可以顯著提升CentOS上Kubernetes集群的性能和穩定性。需要注意的是，具體的優化方案需要根據實際的集群規模、業務需求和硬件環境進行調整。