【消息中间件】基于docker的kafka环境搭建

第一步 搭建zookeeper环境
1)docker pull wurstmeister/zookeeper
2)docker run -d --restart=always --log-driver json-file --log-opt max-size=100m --log-opt max-file=2 --name zookeeper -p 2181:2181 -v /etc/localtime:/etc/localtime wurstmeister/zookeeper

第二步 创建kafka环境
1)docker pull wurstmeister/kafka
2)docker run -d --restart=always --log-driver json-file --log-opt max-size=100m --log-opt max-file=2 --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=xxx:xxx:xxx:xxx/kafka -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://xxx:xxx:xxx:xxx:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -v /etc/localtime:/etc/localtime wurstmeister/kafka

参数说明:
-e KAFKA_BROKER_ID=0 在kafka集群中,每个kafka都有一个BROKER_ID来区分自己

-e KAFKA_ZOOKEEPER_CONNECT=xxx:xxx:xxx:xxx:2181/kafka 配置zookeeper管理kafka的路径172.16.0.13:2181/kafka

-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT:// xxx:xxx:xxx:xxx:9092 把kafka的地址端口注册给zookeeper,如果是远程访问要改成外网IP,类如Java程序访问出现无法连接。

-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口

-v /etc/localtime:/etc/localtime 容器时间同步虚拟机的时间

第三步 搭建kafka管理平台
1)docker pull docker.io/sheepkiller/kafka-manager
2)docker run -it -d --rm -p 9000:9000 -e ZK_HOSTS="xxx:xxx:xxx:xxx" --net=host sheepkiller/kafka-manager
3)firewall-cmd --add-port=9000/tcp

浏览器中访问 http://xxx:xxx:xxx:xxx:9000

后端使用:
pip install kafka-python

posted @ 2024-06-21 23:22  神精兵  阅读(19)  评论(0)    收藏  举报