Ubuntu上Zookeeper日志管理技巧

在Ubuntu上管理Zookeeper日志可以通過以下幾種技巧和步驟進行：

日志配置

1. 配置文件：

   • zoo.cfg：在配置文件中，通過dataDir和dataLogDir配置項分別指定快照日志和事務日志的存儲路徑。建議將事務日志和快照日志分開存儲，以提高系統性能。
   • log4j.properties：在conf目錄下的log4j.properties文件中配置zookeeper.log.dir，指定log4j日志文件的存儲路徑。

2. 日志級別和輸出：

   • 可以通過修改zkEnv.sh中的ZOO_LOG4J_PROP屬性來調整日志級別和輸出格式。

日志清理

1. 自動清理：

   • 從Zookeeper 3.4.0開始，支持通過zoo.cfg中的autopurge.snapRetainCount和autopurge.purgeInterval參數實現日志文件的定時清理。例如，設置autopurge.purgeInterval為24小時，autopurge.snapRetainCount為3，表示每24小時清理一次，保留最近的3個快照文件。

2. 手動清理：

   • 可以手動運行zkCleanup.sh腳本來清理舊的日志和快照文件。例如：./bin/zkCleanup.sh -n 3表示保留最近的3個快照文件及其對應的日志文件。

日志輪換

1. 日志輪轉工具：
   • 使用Logrotate進行日志輪轉，防止單個日志文件過大?？梢耘渲肔ogrotate定期輪換、壓縮和刪除舊的日志文件。
   • 示例配置：

     /var/log/zookeeper/*.log {
         daily
         rotate 7
         missingok
         notifempty
         compress
         delaycompress
         create 0640 root root
         sharedscripts
         postrotate
             /bin/kill -HUP `cat /var/run/zookeeper.pid 2>/dev/null`
         endscript
     }
     

日志分析

1. 查看日志文件：

   • Zookeeper的日志文件通常存儲在/var/log/zookeeper目錄下，可以使用cat命令查看zookeeper.out文件。

2. 使用工具：

   • Zookeeper自帶工具：如ZooKeeper Assistant、ZooInspector和PrettyZoo，用于日志查看和分析。
   • 第三方工具：如Zabbix、Prometheus，用于集成監控和告警。

3. 日志分析步驟：

   • 確定問題類型：通過日志級別快速定位問題類型。
   • 分析日志內容：查看具體的日志信息，如時間、線程名、日志級別、消息等。
   • 結合配置文件：根據日志中的信息，結合Zookeeper的配置文件進行更深入的分析。

通過以上方法，可以有效地管理和分析Zookeeper在Ubuntu系統中的日志，幫助進行故障排查和性能優化。