centos k8s部署中日志管理技巧

在CentOS上部署Kubernetes（k8s）時，日志管理是一個關鍵的運維任務。以下是一些有效的日志管理技巧和策略：

1. 使用EFK堆棧進行日志管理

EFK堆棧（Elasticsearch, Fluentd, Kibana）是一個流行的日志收集和分析解決方案。

• Elasticsearch：用于存儲和索引日志數據。
• Fluentd：用于日志數據的收集和傳輸。
• Kibana：用于日志數據的可視化和分析。

部署步驟：

1. 安裝Elasticsearch：

   • 創建Elasticsearch的Service Account、ClusterRole和ClusterRoleBinding。
   • 創建Elasticsearch的StatefulSet。

2. 安裝Fluentd：

   • 可以通過Helm chart或直接在Kubernetes中部署Fluentd的DaemonSet。
   • 配置Fluentd的輸入和輸出插件。

3. 安裝Kibana：

   • 配置Kibana以連接到Elasticsearch。

2. 使用logrotate進行日志輪轉

logrotate是一個強大的日志文件管理工具，可以自動對日志進行截斷、壓縮以及刪除舊的日志文件。

配置示例：

/var/lib/docker/containers/*/*-json.log {
    create 0644 root root
    notifempty
    missingok
    copytruncate
    noolddir
    rotate 2
    size 5M
}

這個配置表示每5MB的日志文件會被輪轉，并保留兩個備份文件。

3. 使用kubectl命令行工具收集日志

kubectl是Kubernetes的命令行工具，可以用來獲取Pod和容器的日志。

• 獲取單個容器的日志：

  kubectl logs pod-name -c container-name
  

• 實時獲取日志：

  kubectl logs -f pod-name -c container-name
  

• 獲取歷史日志：

  kubectl logs --previous pod-name -c container-name
  

4. 使用Fluentd安裝在宿主機上

這種方式將Fluentd安裝在每個宿主機上，然后把日志轉發到遠端的Elasticsearch等存儲服務中。

優點：

• 在一個節點上只需要部署一個Agent，不會對應用和Pod有任何入侵性。

缺點：

• 應用程序需要將日志輸出到容器的stdout和stderr，增加了一些配置復雜性。

5. 使用Sidecar容器日志收集

這種方式通過Sidecar容器來讀取應用程序日志文件，并將其重定向到stdout和stderr，然后再使用Fluentd將日志收集到遠端存儲。

優點：

• 彌補了Fluentd安裝在宿主機上的不足，解決了應用程序必須輸出到stdout和stderr的問題。

缺點：

• 增加了資源消耗和配置復雜性。

通過以上技巧和策略，您可以在CentOS上部署Kubernetes時實現高效的日志管理，確保日志數據的可用性和可分析性。