docker安装kafka和zookeeper

浅浅的花香味﹌ 2023-01-14 05:52 169阅读 0赞

1下载镜像

docker pull wurstmeister/zookeeper  
    docker pull wurstmeister/kafka

2启动zookeeper容器

docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper

3 启动kafka容器

docker run  -d --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=192.168.1.100:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.1.100:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -t wurstmeister/kafka

这里面主要设置了4个参数  
KAFKA\_BROKER\_ID=0 KAFKA\_ZOOKEEPER\_CONNECT=192.168.1.100:2181 KAFKA\_ADVERTISED\_LISTENERS=PLAINTEXT://192.168.1.100:9092 KAFKA\_LISTENERS=PLAINTEXT://0.0.0.0:9092 中间两个参数的192.168.204.128改为宿主机器的IP地址，如果不这么设置，可能会导致在别的机器上访问不到kafka。

4测试kafka 进入kafka容器的命令行

docker exec -it kafka /bin/bash

进入kafka所在目录

cd opt/kafka_2.11-2.0.0/

启动消息发送方

./bin/kafka-console-producer.sh --broker-list localhost:9092 --topic mykafka

克隆会话 进入kafka所在目录

cd opt/kafka_2.11-2.0.0/

启动消息接收方

./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic mykafka --from-beginning

在消息发送方输入123456  
在消息接收方查看  
如果看到123456 消息发送完成

5集群搭建  
使用docker命令可快速在同一台机器搭建多个kafka，只需要改变brokerId和端口

docker run -d --name kafka1 -p 9093:9093 -e KAFKA_BROKER_ID=1 -e KAFKA_ZOOKEEPER_CONNECT=192.168.1.100:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.1.100:9093 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9093 -t wurstmeister/kafka

6创建Replication为2，Partition为2的topic 在kafka容器中的opt/kafka\_2.12-1.1.0/目录下输入

bin/kafka-topics.sh --create --zookeeper 192.168.1.100:2181 --replication-factor 2 --partitions 2 --topic partopic

7.查看topic的状态 在kafka容器中的opt/kafka\_2.12-1.1.0/目录下输入

bin/kafka-topics.sh --describe --zookeeper 192.168.1.100:2181 --topic partopic

输出结果：

Topic:partopic  PartitionCount:2    ReplicationFactor:2 Configs:
    Topic: partopic Partition: 0    Leader: 0   Replicas: 0,1   Isr: 0,1
    Topic: partopic Partition: 1    Leader: 0   Replicas: 1,0   Isr: 0,1