温馨提示×

linux kafka怎么用

小樊
48
2026-10-17 00:12:04
栏目: 智能运维

下面给你一个在 Linux 上使用 Kafka 的入门级实战指南,从安装到基本使用,适合刚开始接触 Kafka 的人。


一、环境准备

1. 安装 JDK(Kafka 依赖 Java)

java -version

如果没有安装:

sudo apt update
sudo apt install openjdk-11-jdk -y   # Ubuntu / Debian

二、下载并安装 Kafka

以 Kafka 3.x 为例:

cd /opt
sudo wget https://downloads.apache.org/kafka/3.6.1/kafka_2.13-3.6.1.tgz
sudo tar -xzf kafka_2.13-3.6.1.tgz
sudo mv kafka_2.13-3.6.1 kafka
cd kafka

三、启动 Kafka(单节点)

Kafka 依赖 Zookeeper(老版本)或 KRaft(新版本),这里先用 Zookeeper 方式(最常见)。

1. 启动 Zookeeper

bin/zookeeper-server-start.sh config/zookeeper.properties

2. 启动 Kafka

另开一个终端:

bin/kafka-server-start.sh config/server.properties

看到 started (kafka.server.KafkaServer) 就成功了。


四、Kafka 基本使用

1. 创建 Topic

bin/kafka-topics.sh \
  --create \
  --topic test \
  --bootstrap-server localhost:9092 \
  --partitions 1 \
  --replication-factor 1

查看 Topic:

bin/kafka-topics.sh --list --bootstrap-server localhost:9092

2. 发送消息(生产者)

bin/kafka-console-producer.sh \
  --topic test \
  --bootstrap-server localhost:9092

然后输入消息:

hello kafka
this is a test

3. 消费消息(消费者)

另开终端:

bin/kafka-console-consumer.sh \
  --topic test \
  --bootstrap-server localhost:9092 \
  --from-beginning

你会看到之前发送的消息。


五、常用命令速查

查看 Topic 详情

bin/kafka-topics.sh --describe --topic test --bootstrap-server localhost:9092

删除 Topic

bin/kafka-topics.sh --delete --topic test --bootstrap-server localhost:9092

查看消费组

bin/kafka-consumer-groups.sh --list --bootstrap-server localhost:9092

六、用 Java 简单示例(可选)

生产者

Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9092");
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

KafkaProducer<String, String> producer = new KafkaProducer<>(props);
producer.send(new ProducerRecord<>("test", "hello java"));
producer.close();

七、常见问题

1. 端口占用

lsof -i:9092

2. 单机只能 replication-factor=1

3. Kafka 3.x 可用 KRaft(无 Zookeeper)

如果你愿意,我可以给你 KRaft 模式配置教程。


八、下一步你可以学什么

  • Kafka 分区与副本机制
  • 消费者组(Consumer Group)
  • 消息顺序性
  • Kafka + Spring Boot
  • 日志收集 / 实时流处理(Flink)

如果你告诉我:

  • ✅ 是学习用还是生产用
  • ✅ 单机能接受还是集群
  • ✅ 用 Shell / Java / Python

我可以直接给你更精准的教程或脚本。

0 踩