Kafka简介
Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,用scala语言编写,Linkedin于2010年贡献给了Apache基金会并成为顶级开源 项目。
Kafka启动:(根据自身路径更改)
/usr/local/kafka/bin/kafka-server-start.sh -daemon /usr/local/kafka/config/server.properties
Zookeeper启动:(根据自身路径更改)
/usr/local/zookeeper/bin/zkServer.sh start
进入客户端的命令:{zookeeper目录}/bin/zkCli.sh
/usr/local/zookeeper/bin/zkCli.sh
以下是几个zookeeper客户端用的命令,不只kafka,其他任何注册到zookeeper的服务都可以使用这些命令。
1、ls
ls会显示该节点下的子节点信息
比如:ls /
1. [zk: localhost:2181(CONNECTED)1] ls /
2. [dubbo, log_dir_event_notification, isr_change_notification, zookeeper, admin, consumers, cluster, config, latest_producer_id_block, controller, brokers, controller_epoch]
#显示zookeeper根目录下的子节点,其中kafka的broker在zookeeper根目录注册了brokers节点
比如:ls /brokers/topics/lockcar_loction/partitions
1. [zk: localhost:2181(CONNECTED)2] ls /brokers/topics/lockcar_loction/partitions
2. [1,0]
#显示lockcar_loction这个topic下的partitions的子节点
2、get
get命令会显示该节点的节点数据内容和属性信息
比如:get /brokers/topics/lockcar_loction
1. [zk: localhost:2181(CONNECTED)2]get/brokers/topics/lockcar_loction
2. {"version":1,"partitions":{"1":[1],"0":[3]}}
3. cZxid =0x5000000cf
4. ctime =WedApr0809:12:12 CST 2020
5. mZxid =0x5000000cf
6. mtime =WedApr0809:12:12 CST 2020
7. pZxid =0x5000000d2
8. cversion =1
9. dataVersion =0
10. aclVersion =0
11. ephemeralOwner =0x0
12. dataLength =44
13. numChildren =1
#显示lockcar_loction这个topic的节点数据内容和属性信息。
#第一行大括号里面就是节点的数据内容,创建topic时候的定义的topic级别配置会被记录在这里
3、ls2
ls2命令会显示该节点的子节点信息和属性信息
比如:ls2 /brokers/topics/lockcar_loction
1. [zk: localhost:2181(CONNECTED)4] ls2 /brokers/topics/lockcar_loction
2. [partitions]
3. cZxid =0x5000000cf
4. ctime =WedApr0809:12:12 CST 2020
5. mZxid =0x5000000cf
6. mtime =WedApr0809:12:12 CST 2020
7. pZxid =0x5000000d2
8. cversion =1
9. dataVersion =0
10. aclVersion =0
11. ephemeralOwner =0x0
12. dataLength =44
13. numChildren =1
#显示lockcar_loction这个topic的子节点和属性信息。
#第一行中括号里的是子节点。
• 输入编号:6692,直达文章
• 输入m|M,直达目录列表