温馨提示×

linux kafka怎么测试

小樊
45
2026-10-19 21:51:58
栏目: 智能运维

在 Linux 上测试 Kafka,通常分为 环境准备 → 启动服务 → 基本功能测试 → 常用测试工具/命令 几个步骤。下面给你一套最常用、最实用的测试方法(以 Kafka 3.x 为例,自带 Zookeeper 或 KRaft 均可)。


一、前提条件

  • Linux 系统(CentOS / Ubuntu 等)
  • 已安装 JDK 8+
  • 已下载 Kafka(如 kafka_2.13-3.6.1.tgz)
java -version

二、启动 Kafka(测试环境)

1️⃣ 使用内置 Zookeeper(最简单)

# 解压
tar -xzf kafka_2.13-3.6.1.tgz
cd kafka_2.13-3.6.1

# 启动 Zookeeper
bin/zookeeper-server-start.sh config/zookeeper.properties

# 另开一个终端,启动 Kafka
bin/kafka-server-start.sh config/server.properties

✅ 看到 started (kafka.server.KafkaServer) 表示启动成功


三、最基础的 Kafka 测试(命令行)

1️⃣ 创建 Topic

bin/kafka-topics.sh \
  --create \
  --topic test-topic \
  --bootstrap-server localhost:9092 \
  --partitions 1 \
  --replication-factor 1

查看 Topic:

bin/kafka-topics.sh --list --bootstrap-server localhost:9092

2️⃣ 生产消息(Producer 测试)

bin/kafka-console-producer.sh \
  --topic test-topic \
  --bootstrap-server localhost:9092

输入消息:

hello kafka
test message

3️⃣ 消费消息(Consumer 测试)

另开终端:

bin/kafka-console-consumer.sh \
  --topic test-topic \
  --from-beginning \
  --bootstrap-server localhost:9092

✅ 能看到 producer 发的内容,说明 Kafka 正常


四、Kafka 功能测试

1️⃣ 查看消费组

bin/kafka-consumer-groups.sh \
  --bootstrap-server localhost:9092 \
  --list

2️⃣ 查看 Topic 详情

bin/kafka-topics.sh \
  --describe \
  --topic test-topic \
  --bootstrap-server localhost:9092

五、性能测试(压测)

1️⃣ 生产者压测

bin/kafka-producer-perf-test.sh \
  --topic test-topic \
  --num-records 100000 \
  --record-size 1024 \
  --throughput -1 \
  --producer-props bootstrap.servers=localhost:9092

2️⃣ 消费者压测

bin/kafka-consumer-perf-test.sh \
  --topic test-topic \
  --bootstrap-server localhost:9092 \
  --messages 100000

六、用 Python / Java 测试(可选)

Python 示例

pip install kafka-python
from kafka import KafkaProducer

p = KafkaProducer(bootstrap_servers='localhost:9092')
p.send('test-topic', b'hello from python')
p.flush()

七、常见问题排查

Kafka 起不来?

# 查看日志
tail -f logs/server.log

端口不通?

netstat -an | grep 9092

八、总结(测试流程一句话)

启动 Zookeeper + Kafka → 建 Topic → console-producer 发消息 → console-consumer 收消息 → 成功即测试通过


如果你愿意,我可以:

  • 给你 KRaft 模式测试步骤
  • 给你 Docker Kafka 测试方式
  • 给你 生产级配置测试方案

你现在是学习测试,还是线上环境验证?

0 踩