【kafka】常用命令汇总
Kafka 汇总 常用命令
2023-09-11 14:17:08 时间
查询
1.查看所有或者指定Topic的信息
查看Topic的分区情况 副本情况和 配置情况
## 所有
bin/kafka-topics.sh --describe --zookeeper xxxx
##指定
bin/kafka-topics.sh --describe --zookeeper xxxx --topic TOPIC名称
输出
[root@ kafka]# bin/kafka-topics.sh --describe --zookeeper xxx.xx.xx.xx --topic SHI_TOPIC3
Topic:SHI_TOPIC3 PartitionCount:3 ReplicationFactor:1 Configs:cleanup.policy=compact
Topic: SHI_TOPIC3 Partition: 0 Leader: 0 Replicas: 0 Isr: 0
Topic: SHI_TOPIC3 Partition: 1 Leader: 2 Replicas: 2 Isr: 2
Topic: SHI_TOPIC3 Partition: 2 Leader: 1 Replicas: 1 Isr: 1
2.列出所有Topic
## topic列表查询
bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --list
## topic列表查询(支持0.9版本+)
bin/kafka-topics.sh --list --bootstrap-server localhost:9092
3.新消费者列表查询
## 新消费者列表查询(支持0.9版本+)
bin/kafka-consumer-groups.sh --new-consumer --bootstrap-server localhost:9092 --list
## 新消费者列表查询(支持0.10版本+)
bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --list
输出
[root@]# bin/kafka-consumer-groups.sh --bootstrap-server xxx.xxx.xxx --list
Note: This will not show information about old Zookeeper-based consumers.
consumer-id
consumer-id1
BASE-DEMO
4.显示某个消费组的消费详情(0.10.1.0版本+)
查看某个消费者有多少消费者,消费哪些Topic; 消费者分别消费哪个分区等等信息;并且消费到的位置offset
bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --group my-group
输出
[root@dev5_172_16_10_62 kafka]# bin/kafka-consumer-groups.sh --bootstrap-server xxxx --describe --group consumer-id7
Note: This will not show information about old Zookeeper-based consumers.
TOPIC PARTITION CURRENT-OFFSET LOG-END-OFFSET LAG CONSUMER-ID HOST CLIENT-ID
SHI_TOPIC3 0 128 128 0 myClientId7-0-c6568666-b249-491a-a1e2-c3bd85f343c6/172.16.14.37 myClientId7-0
SHI_TOPIC4 0 0 0 0 myClientId7-0-c6568666-b249-491a-a1e2-c3bd85f343c6/172.16.14.37 myClientId7-0
TODO
相关文章
- Kafka-为什么选择kafka(kafka的优点)
- Kafka KRaft模式探索
- 《KAFKA官方文档》第三章:快速入门(二)
- Spring Kafka(二)操作Topic以及Kafka Tool 2的使用
- Kafka_Kafka 消费者 偏移量 与 积压 查询脚本 kafka-consumer-groups.sh
- 《面试八股文》之 Kafka 21卷
- 简单聊一聊spring cloud stream和kafka的那点事
- [转]RabbitMQ,ActiveMQ,ZeroMQ,Kafka之间的比较与资料汇总
- 【kafka异常】kafka 常见异常处理方案(持续更新! )
- kafka可视化客户端工具(Kafka Tool)的基本使用
- Kafka(五)Kafka的API操作和拦截器
- Kafka实战:集群SSL加密认证和配置(最新版kafka-2.7.0)
- kafka最佳实践:Kafka Best Practices
- kafka producer batch expired TimeoutException: KAFKA-5621、KIP-91(Provide Intuitive User Timeouts in The Producer)、KAFKA-5886
- Kafka Producer NetworkException and Timeout Exceptions
- ranger kafka - Authorizing Kafka access over non-authenticated channel via Ranger
- 重磅开源 KSQL:用于 Apache Kafka 的流数据 SQL 引擎 2017.8.29
- Kafka设计解析(八)- Exactly Once语义与事务机制原理
- Automatically migrating data to new machines kafka集群扩充迁移topic
- [转]flume-ng+Kafka+Storm+HDFS 实时系统搭建
- apache kafka监控系列-KafkaOffsetMonitor(转)
- kafka具体解释一、Kafka简单介绍
- Kafka可视化工具-Offset Explorer使用