如何監控centos上k8s的部署狀態

如何監控CentOS上K8s的部署狀態

在CentOS系統上監控Kubernetes（K8s）集群的部署狀態，需結合命令行工具（快速排查）、可視化工具（直觀展示）、告警系統（主動通知）三類方案，覆蓋從基礎到高級的監控需求。以下是具體方法：

1. 使用kubectl命令行工具（基礎監控）

kubectl是K8s官方命令行工具，可直接與集群API交互，快速查看部署狀態，適合日常運維和故障排查。

• 查看節點狀態：確認集群節點是否正常運行（Ready狀態為正常）。

  kubectl get nodes
  

• 查看Pod狀態：檢查應用Pod的運行狀態（Running為正常，Pending表示未調度，CrashLoopBackOff表示容器崩潰）。

  kubectl get pods --all-namespaces
  

• 查看Deployment狀態：確認Deployment的副本數是否達到預期（AVAILABLE列表示可用副本數）。

  kubectl get deployments --all-namespaces
  

• 查看詳細信息：通過describe命令獲取資源的具體事件（如調度失敗、鏡像拉取錯誤）。

  kubectl describe pod <pod-name> -n <namespace>  # 查看Pod詳情
  kubectl describe deployment <deployment-name> -n <namespace>  # 查看Deployment詳情
  

• 查看集群事件：獲取集群內發生的異常事件（如節點失效、Pod驅逐）。

  kubectl get events --all-namespaces
  

這些命令能快速定位部署中的常見問題（如Pod無法啟動、副本數不足），是運維人員的基礎工具。

2. 使用Kubernetes Dashboard（Web可視化）

Kubernetes Dashboard是官方提供的Web界面，可直觀展示集群資源狀態，適合需要圖形化管理的場景。

• 安裝Dashboard：通過kubectl應用官方YAML文件部署。

  kubectl apply -f https://raw.githubusercontent.com/kubernetes/dashboard/v2.7.0/aio/deploy/recommended.yaml
  

• 訪問Dashboard：
  1. 獲取訪問Token（用于登錄）：

     kubectl -n kube-system describe secret $(kubectl -n kube-system get secret | grep admin-user | awk '{print $1}')
     

  2. 打開瀏覽器訪問：https://<CentOS節點IP>:30000，輸入Token登錄。
• 功能：
  • 實時查看節點、Pod、Deployment、Service等資源的運行狀態；
  • 支持創建/刪除資源、查看日志、執行命令（如exec進入Pod）；
  • 提供簡單的資源監控圖表（如CPU、內存使用率）。
    Dashboard適合需要快速查看集群狀態的團隊，但功能較基礎，復雜監控需結合其他工具。

3. 使用Prometheus+Grafana（專業監控與可視化）

Prometheus（監控系統）+Grafana（可視化平臺）是K8s生態中最流行的監控組合，支持全面的指標采集、靈活的可視化和告警功能，適合生產環境。

• 安裝Prometheus：通過Helm Chart快速部署（推薦），簡化配置流程。

  helm repo add prometheus-community https://prometheus-community.github.io/helm-charts
  helm install prometheus prometheus-community/kube-prometheus-stack
  

• 安裝Grafana：通過YUM或Helm安裝，配置Prometheus為數據源。

  sudo yum install -y grafana
  sudo systemctl start grafana-server
  sudo systemctl enable grafana-server
  

  登錄Grafana（http://<CentOS節點IP>:3000，默認賬號admin/admin），添加Prometheus數據源。
• 配置監控：
  • 導入Grafana官方提供的K8s監控儀表盤（如Kubernetes Cluster Monitoring，ID：193）；
  • 自定義儀表盤，添加關鍵指標（如Deployment副本數、Pod重啟次數、節點CPU/內存使用率）。
• 告警功能：通過Prometheus的alertmanager組件設置告警規則（如Pod連續重啟超過3次時發送郵件/Slack通知）。
  Prometheus+Grafana適合需要深度監控和自定義視圖的企業級場景，能提前發現潛在問題（如資源不足、部署失?。?。

4. 使用第三方監控工具（企業級增強）

若需要開箱即用的企業級功能（如自動發現集群、多租戶支持、高級告警），可選擇以下第三方工具：

• Datadog：支持K8s集群的全面監控（應用、容器、基礎設施），提供實時性能視圖、異常檢測和告警；
• New Relic：整合K8s和應用性能監控（APM），跟蹤請求鏈路，識別性能瓶頸；
• Dynatrace：基于AI的自動監控，支持微服務追蹤和根因分析；
• Zabbix：傳統企業級監控工具，支持K8s集群的指標采集和告警。
  這些工具通常需要付費，但提供更完善的支持和維護，適合中大型企業。

5. 日志監控（輔助排查）

部署狀態的異常往往伴隨日志錯誤，需結合日志分析工具定位問題：

• 查看Pod日志：通過kubectl查看Pod的標準輸出日志（-f參數實時跟蹤）。

  kubectl logs <pod-name> -n <namespace>
  kubectl logs -f <pod-name> -n <namespace>  # 實時日志
  

• 查看kubelet日志：kubelet是K8s節點代理，其日志能反映節點級別的異常（如容器運行時問題）。

  journalctl -u kubelet -f
  

• 集中式日志管理：使用ELK（Elasticsearch+Logstash+Kibana）或Loki+Grafana收集、存儲和分析集群日志，快速定位問題根源（如應用崩潰、配置錯誤）。

以上方法覆蓋了從基礎命令行到企業級可視化的監控需求，可根據集群規模（如測試環境用Dashboard+命令行，生產環境用Prometheus+Grafana+第三方工具）和預算選擇合適的方案。