博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
kafka常用命令
阅读量:5856 次
发布时间:2019-06-19

本文共 1854 字,大约阅读时间需要 6 分钟。

1)下载kafka_2.10-0.8.2.1.tgz并解压(整合scala)

2)修改配置文件(可选)
config/zookeeper.properties
dataDir=/zookeeper
这么写建到d盘根目录
dataDir=zookeeper
这么写建到bin/windows目录
3)启动zookeeper(窗口1)
zookeeper-server-start.sh ../config/zookeeper.properties
4)zookeeper测试(窗口2)
echo stat | nc 192.168.159.133 2181
5)启动kafka(窗口3)
kafka-server-start.sh ../config/server.properties
6)创建topic(窗口4)
kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 3 --topic mytopic
7)查看topic(窗口4)
kafka-topics.sh --describe --zookeeper localhost:2181 --topic mytopic
Topic:mytopic PartitionCount:3 ReplicationFactor:1 Configs:
Topic: mytopic Partition: 0 Leader: 0 Replicas: 0 Isr: 0
Topic: mytopic Partition: 1 Leader: 0 Replicas: 0 Isr: 0
Topic: mytopic Partition: 2 Leader: 0 Replicas: 0 Isr: 0
8)发布/生产消息窗口(窗口5)
kafka-console-producer.sh --broker-list localhost:9092 --topic mytopic
有一个错误提示,但是不影响(kafa的bugKAFKA-1711,KAFKA-1824,预计0.9修复)

9)消费消息窗口(窗口6)

kafka-console-consumer.sh --zookeeper localhost:2181 --from-beginning --topic mytopic

10)znode查看

ls /
[consumers, config, controller, admin, brokers, zookeeper, controller_epoch
ls /consumers
[console-consumer-21728]
ls /config
[topics, changes]
ls /controller
[]
ls /admin
[delete_topics]
ls /brokers
[topics, ids]
ls /zookeeper
[quota]
ls /controller_epoch
[]
11)检查offset(窗口4)
注意:group为consumerid,需要在zk里面查ls /consumer
kafka-consumer-offset-checker.sh --topic mytopic --zookeeper localhost:2181 --broker-info 1
27.0.0.1:9092 --group console-consumer-64061
Group Topic Pid Offset logSize
Lag Owner
console-consumer-64061 mytopic 0 4 4
0 console-consumer-64061_zynb0411-1443580144073-95285fc3
-0
console-consumer-64061 mytopic 1 1 1
0 console-consumer-64061_zynb0411-1443580144073-95285fc3
-0
console-consumer-64061 mytopic 2 1 1
0 console-consumer-64061_zynb0411-1443580144073-95285fc3
-0
BROKER INFO
0 -> zynb0411:9092

转载地址:http://fnojx.baihongyu.com/

你可能感兴趣的文章
AWS推出OpenJDK长期支持版本Amazon Corretto
查看>>
将团队迁移到可视化项目管理软件
查看>>
Mozilla开发全新的公开网络API WebXR 来实现增强现实
查看>>
Eclipse基金会发布MicroProfile 2.2,适用于Java微服务
查看>>
从图形到像素:前端图形编程技术概览
查看>>
AI+社交,快手商业化落地之道
查看>>
Java 9正式版有可能被推迟到9月21号发布
查看>>
Netflix实时流处理平台Keystone介绍
查看>>
Git 2.20的重大更新:侧重可用性和性能
查看>>
Micronaut教程(二):分布式跟踪、JWT安全和AWS Lambda部署
查看>>
移动应用开发过程中的迭代式原型设计
查看>>
Clojure 1.7引入Transducers,提高跨平台支持度
查看>>
内向的人很难成为群体程序员吗?
查看>>
PHP扩展库PEAR被攻击,近半年下载者或被影响
查看>>
linux下用core和gdb查询出现"段错误"的地方
查看>>
cmd 命令行下复制和粘贴
查看>>
WINDOWS系统下路由设置
查看>>
Linux系统简介&分区&基础命令(ADMIN01-1)
查看>>
数据库笔记6:检索,排序检索,过滤数据
查看>>
DAY11 Shell脚本基础(Enginner05-2)
查看>>