Ubuntu Kafka数据备份与恢复方法

ubuntu

小樊

2025-08-28 13:04:46

栏目: 智能运维

全量备份
- kafka-dump：
  安装：sudo apt-get install kafka-dump
  命令：kafka-dump --bootstrap-server localhost:9092 --output-dir /path/to/backup
- kafka-backup（推荐）：
  安装：sudo apt-get install confluent-kafka-backup
  命令：kafka-backup --bootstrap-server localhost:9092 --backup-dir /path/to/backup
增量备份
- MirrorMaker：
  配置文件示例：
```
consumer.bootstrap.servers=localhost:9092
producer.bootstrap.servers=backup-host:9092
whitelist=your_topic_name
```
  命令：kafka-run-class.sh kafka.tools.MirrorMaker --consumer.config /path/to/config --producer.config /path/to/config --whitelist your_topic_name

全量恢复
- kafka-dump：
  kafka-console-producer.sh --broker-list localhost:9092 --topic RESTORE_TOPIC --new-producer < /path/to/backup/backup_file
- kafka-backup：
  kafka-backup --bootstrap-server localhost:9092 --restore-dir /path/to/backup
增量恢复
使用 MirrorMaker 从备份端同步增量数据到目标端（需先完成全量恢复）。

最新问答