文章目录

  • 前言
  • 1. 安装zookeeper
  • 2. 安装kafka
  • 3. 可视化界面安装
  • 4. 消息生产和消费演示



前言

安装要求:

  • docker已安,最好配置阿里等镜像加速,提高镜像下载速度
    没安装的可参考Ubuntu快速安装Docker及管理界面portainer

安装介绍:

  • 安装zookpeeper,Kafka的运行依赖ZooKeeper ZooKeeper是一个分布式协调服务,它的主要作用是为分布式系统提供一致性服务,提供的功能包括:配置维护、命名服务、分布式同步、组服务等。
  • 安装kafka
    Kafka是一款性能非常好的并且支持分布式的消息队列中间件。由于它的高吞吐特性,Kafka通常使用在大数据领域,如日志收集平台。其实Kafka是一个流处理平台,这个概念不太好理解,之所以叫做流,是因为它在工作中就像是一个可以支撑高吞吐量的管道,数据像水一样流进去,然后另外一端再去读取这些数据。我们就可以把Kafka看作是一种特殊的消息队列中间件。

1. 安装zookeeper

docker run -d --name zookeeper -p 2181:2181 -v  /etc/localtime:/etc/localtime wurstmeister/zookeeper
  • /etc/localtime:/etc/localtime让docker容器使用主机系统时间(挂入/etc/localtime)
  • -p 2181:2181 前面的2181表示容器外宿主机的监听端口,后面的2181表示zookeeper 自身在容器中运行的端口。

2. 安装kafka

  • 命令行中192.168.41.128,改为你实际ip
docker run  -d --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=192.168.41.128:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.41.128:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -t wurstmeister/kafka
  • -e KAFKA_BROKER_ID=0 在kafka集群中,每个kafka都有一个BROKER_ID来区分自己
  • -e KAFKA_ZOOKEEPER_CONNECT=192.168.41.128:2181/kafka 配置zookeeper管理kafka的路径,192.168.41.128改为你zookeeper部署的实际ip
  • -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.41.128:9092 把kafka的地址端口注册给zookeeper
    ,192.168.41.128改为你kafka部署的实际ip
  • -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口
  • -v /etc/localtime:/etc/localtime 容器时间同步虚拟机的时间

3. 可视化界面安装

  • kafkaUI-lite是一个轻便好用的kafka ui界面客户端工具,可以在生产消息、消费消息、管理topic、管理group;可以支持管理多个kafka集群
  • docker一键安装
docker run -d -p 8889:8889 freakchicken/kafka-ui-lite
  • 访问 http://ip:8889

4. 消息生产和消费演示

  • 浏览器输入http://ip:8889 访问管理界面
  • kafka 容器镜像下载 kafka容器化_UI可视化

  • 添加kafka地址
  • kafka 容器镜像下载 kafka容器化_docker_02

  • 查看kafka订阅情况
  • kafka 容器镜像下载 kafka容器化_分布式_03

  • 生产消息
  • kafka 容器镜像下载 kafka容器化_UI可视化_04


  • kafka 容器镜像下载 kafka容器化_docker_05

  • 消费消息
  • kafka 容器镜像下载 kafka容器化_kafka 容器镜像下载_06