ubuntu上kafka如何進行故障排查

以下是在Ubuntu上進行Kafka故障排查的常用方法：

1. 檢查服務狀態

   • 使用sudo systemctl status kafka查看Kafka服務是否運行，未運行則啟動：sudo systemctl start kafka。
   • 確保Zookeeper服務正常：sudo systemctl status zookeeper。

2. 查看日志文件

   • 日志默認路徑為/var/log/kafka/，查看server.log定位錯誤：sudo tail -f /var/log/kafka/server.log。

3. 驗證配置文件

   • 檢查/etc/kafka/server.properties，重點關注listeners、advertised.listeners、zookeeper.connect等配置是否正確。

4. 檢查網絡與端口

   • 使用ping和telnet測試網絡連通性及端口（默認9092）是否可達：telnet <broker-ip> 9092。
   • 確保端口未被占用：sudo netstat -tulnp | grep 9092。

5. 監控硬件資源

   • 使用df -h檢查磁盤空間，iostat -x 1 10監控磁盤IO，top查看CPU/內存使用情況。

6. 使用工具輔助排查

   • Kafka命令行工具：
     • 測試生產消費：kafka-console-producer.sh/kafka-console-consumer.sh。
     • 查看Topic詳情：kafka-topics.sh --describe --topic <topic-name> --bootstrap-server <broker-ip>:9092。
   • 監控工具：Prometheus+Grafana監控集群指標，或JConsole查看JMX數據。

7. 處理常見問題

   • 端口占用：修改server.properties中listeners配置或停止占用端口的進程。
   • 磁盤不足：清理日志或擴展存儲，避免log.dirs所在磁盤空間耗盡。
   • 權限問題：確保Kafka用戶對配置文件、日志目錄有讀寫權限。

8. 參考官方文檔與社區

   • 若以上步驟無法解決，查閱Kafka官方文檔或在社區（如Stack Overflow、Kafka郵件組）尋求幫助。

說明：部分路徑（如日志目錄）可能因安裝方式不同略有差異，可通過ps -ef | grep kafka確認實際路徑。