以下是Debian Kafka的数据存储优化技巧:
log.retention.ms(如7天)和log.retention.bytes,避免日志无限增长。log.segment.bytes(如1GB),优化日志分段存储和清理效率。batch.size(如16KB~1MB)和linger.ms(如10~100ms),减少网络请求。fetch.min.bytes和max.partition.fetch.bytes控制批量拉取数据量。kafka-topics.sh)或Prometheus监控磁盘使用率、吞吐量等指标。参考来源: