下面给你一个在 Linux 上使用 Kafka 的入门级实战指南,从安装到基本使用,适合刚开始接触 Kafka 的人。
java -version
如果没有安装:
sudo apt update
sudo apt install openjdk-11-jdk -y # Ubuntu / Debian
以 Kafka 3.x 为例:
cd /opt
sudo wget https://downloads.apache.org/kafka/3.6.1/kafka_2.13-3.6.1.tgz
sudo tar -xzf kafka_2.13-3.6.1.tgz
sudo mv kafka_2.13-3.6.1 kafka
cd kafka
Kafka 依赖 Zookeeper(老版本)或 KRaft(新版本),这里先用 Zookeeper 方式(最常见)。
bin/zookeeper-server-start.sh config/zookeeper.properties
另开一个终端:
bin/kafka-server-start.sh config/server.properties
看到 started (kafka.server.KafkaServer) 就成功了。
bin/kafka-topics.sh \
--create \
--topic test \
--bootstrap-server localhost:9092 \
--partitions 1 \
--replication-factor 1
查看 Topic:
bin/kafka-topics.sh --list --bootstrap-server localhost:9092
bin/kafka-console-producer.sh \
--topic test \
--bootstrap-server localhost:9092
然后输入消息:
hello kafka
this is a test
另开终端:
bin/kafka-console-consumer.sh \
--topic test \
--bootstrap-server localhost:9092 \
--from-beginning
你会看到之前发送的消息。
bin/kafka-topics.sh --describe --topic test --bootstrap-server localhost:9092
bin/kafka-topics.sh --delete --topic test --bootstrap-server localhost:9092
bin/kafka-consumer-groups.sh --list --bootstrap-server localhost:9092
Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9092");
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");
KafkaProducer<String, String> producer = new KafkaProducer<>(props);
producer.send(new ProducerRecord<>("test", "hello java"));
producer.close();
lsof -i:9092
如果你愿意,我可以给你 KRaft 模式配置教程。
如果你告诉我:
我可以直接给你更精准的教程或脚本。