centos上kafka的存儲配置有哪些

在CentOS上配置Kafka的存儲主要涉及修改Kafka的配置文件server.properties。以下是一些關鍵的存儲配置項：

1. broker.id:

   • 每個broker的唯一標識符。
   • 例如：broker.id=0

2. log.dirs:

   • Kafka數據存儲的目錄列表。
   • 例如：log.dirs=/tmp/kafka-logs,/var/lib/kafka-logs

3. log.retention.hours:

   • 日志保留時間，超過這個時間的日志將被刪除。
   • 例如：log.retention.hours=168

4. log.retention.bytes:

   • 單個日志文件的最大大小，超過這個大小的日志將被分割。
   • 例如：log.retention.bytes=1073741824

5. log.segment.bytes:

   • 每個日志段的最大大小。
   • 例如：log.segment.bytes=1073741824

6. log.flush.interval.messages:

   • 在強制刷新到磁盤之前，可以寫入的最大消息數。
   • 例如：log.flush.interval.messages=10000

7. log.flush.interval.ms:

   • 在強制刷新到磁盤之前，可以等待的最大時間（毫秒）。
   • 例如：log.flush.interval.ms=30000

8. num.partitions:

   • 主題的默認分區數。
   • 例如：num.partitions=8

9. default.replication.factor:

   • 主題的默認副本因子。
   • 例如：default.replication.factor=3

10. min.insync.replicas:

    • 寫操作在返回成功之前，必須確認的最小副本數。
    • 例如：min.insync.replicas=2

11. unclean.leader.election.enable:

    • 是否允許在ISR（In-Sync Replicas）不完整的情況下進行leader選舉。
    • 例如：unclean.leader.election.enable=false

12. log.cleanup.policy:

    • 日志清理策略，可以是delete或compact。
    • 例如：log.cleanup.policy=delete

13. log.cleanup.interval.mins:

    • 日志清理任務運行的間隔時間（分鐘）。
    • 例如：log.cleanup.interval.mins=15

14. zookeeper.connect:

    • Zookeeper集群的連接字符串。
    • 例如：zookeeper.connect=localhost:2181

15. offsets.topic.replication.factor:

    • Kafka內部offsets主題的副本因子。
    • 例如：offsets.topic.replication.factor=3

16. transaction.state.log.replication.factor:

    • Kafka內部transaction state log的副本因子。
    • 例如：transaction.state.log.replication.factor=3

17. transaction.state.log.min.isr:

    • Kafka內部transaction state log的最小ISR大小。
    • 例如：transaction.state.log.min.isr=2

這些配置項可以根據你的具體需求進行調整。修改配置文件后，需要重啟Kafka服務以使更改生效。你可以使用以下命令來重啟Kafka：

sudo systemctl restart kafka

或者如果你使用的是init.d腳本：

sudo service kafka restart

請確保在修改配置之前備份原始的server.properties文件，以便在需要時可以恢復。