文章目录
- 前言
- 1. 安装zookeeper
- 2. 安装kafka
- 3. 可视化界面安装
- 4. 消息生产和消费演示
前言
安装要求:
- docker已安,最好配置阿里等镜像加速,提高镜像下载速度
没安装的可参考Ubuntu快速安装Docker及管理界面portainer
安装介绍:
- 安装zookpeeper,
Kafka的运行依赖ZooKeeper
ZooKeeper是一个分布式协调服务,它的主要作用是为分布式系统提供一致性服务,提供的功能包括:配置维护、命名服务、分布式同步、组服务等。 - 安装kafka
Kafka是一款性能非常好的并且支持分布式的消息队列中间件。由于它的高吞吐特性,Kafka通常使用在大数据领域,如日志收集平台。其实Kafka是一个流处理平台,这个概念不太好理解,之所以叫做流,是因为它在工作中就像是一个可以支撑高吞吐量的管道,数据像水一样流进去,然后另外一端再去读取这些数据。我们就可以把Kafka看作是一种特殊的消息队列中间件。
1. 安装zookeeper
docker run -d --name zookeeper -p 2181:2181 -v /etc/localtime:/etc/localtime wurstmeister/zookeeper
-
/etc/localtime:/etc/localtime
让docker容器使用主机系统时间(挂入/etc/localtime) -
-p 2181:2181
前面的2181表示容器外宿主机的监听端口,后面的2181表示zookeeper 自身在容器中运行的端口。
2. 安装kafka
- 命令行中
192.168.41.128
,改为你实际ip
docker run -d --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=192.168.41.128:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.41.128:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -t wurstmeister/kafka
-e KAFKA_BROKER_ID=0
在kafka集群中,每个kafka都有一个BROKER_ID来区分自己-e KAFKA_ZOOKEEPER_CONNECT=192.168.41.128:2181/kafka
配置zookeeper管理kafka的路径,192.168.41.128改为你zookeeper部署的实际ip-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.41.128:9092
把kafka的地址端口注册给zookeeper
,192.168.41.128改为你kafka部署的实际ip-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092
配置kafka的监听端口-v /etc/localtime:/etc/localtime
容器时间同步虚拟机的时间
3. 可视化界面安装
-
kafkaUI-lite
是一个轻便好用的kafka ui界面客户端工具,可以在生产消息、消费消息、管理topic、管理group;可以支持管理多个kafka集群 - docker一键安装
docker run -d -p 8889:8889 freakchicken/kafka-ui-lite
- 访问
http://ip:8889
4. 消息生产和消费演示
- 浏览器输入
http://ip:8889
访问管理界面 - 添加kafka地址
- 查看kafka订阅情况
- 生产消息
- 消费消息