kafka安装

原创

zizhilian2015 2023-01-31 11:23:38 博主文章分类：kafka ©著作权

©著作权归作者所有：来自51CTO博客作者zizhilian2015的原创作品，请联系作者获取转载授权，否则将追究法律责任

kafka学习
1、kafka一主多从，从是用来提高容灾能力，并无其他用处，每次都是从拉取主获取数据
2、AR(所有副本) = ISR(从副本in-sync，在一定的滞后范围之内)+ OSR(从副本out-sync 滞后范围之外的副本)

   kafka安装
   1、安装zookeeper
   wget -P /home/tools/ http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz
   cd /home/tools/
tar zxvf zookeeper-3.4.14.tar.gz
mv zookeeper-3.4.14 /usr/local/
       cd /usr/local/zookeeper-3.4.14/conf
       cp zoo_sample.cfg zoo.cfg
       修改数据目录和日志目录
              dataDir=/tmp/zookeeper/data
               dataLogDir=/tmp/zookeeper/log
       创建目录：
       mkdir -p /tmp/zookeeper/data
mkdir -p /tmp/zookeeper/log

       放入配置文件，
       export ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.14
export PATH=$PATH::$ZOOKEEPER_HOME/bin

       source /etc/profile

       启动：
       zkServer.sh start
zkServer.sh status

2、kafka安装
wget -P /home/tools/ http://archive.apache.org/dist/kafka/2.0.0/kafka_2.11-2.0.0.tgz
cd /home/tools/
tar zxvf kafka_2.11-2.0.0.tgz
mv kafka_2.11-2.0.0 /usr/local/
        cd /usr/local/kafka_2.11-2.0.0/config
        vim server.properties
        打开并改成listeners=PLAINTEXT://localhost:9092

        vim /etc/profile
        export KAFKA_HOME=/usr/local/kafka_2.11-2.0.0
export PATH=$PATH::$KAFKA_HOME/bin
source /etc/profile

启动：
cd ../bin
kafka-server-start.sh ../config/server.properties &

3、测试
kafka-topics.sh --create --replication-factor 1 --partitions 3 --topic test
kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 3 --topic test
kafka-topics.sh --list --zookeeper localhost:2181