美文网首页Apache Kafka
Kafka1.0.0如何查看队列消费进度

Kafka1.0.0如何查看队列消费进度

作者: 蠟筆小噺没有烦恼 | 来源:发表于2018-01-04 13:49 被阅读885次

按照网上的方法尝试了./kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper **:2181 --group ** --topic **

发现并不管用,查看了kafka 的jar包,貌似ConsumerOffsetChecker 类已经被移除,上github上看了下kafka的源码,告知我:

The kafka-consumer-offset-checker.sh (kafka.tools.ConsumerOffsetChecker) has been deprecated. Going forward, please use kafka-consumer-groups.sh

不管是kafka-consumer-offset-checker.sh脚本还是run-class.sh kafka.tools.ConsumerOffsetChecker都已经失效,可以使用kafka-consumer-groups.sh。

使用如下配置:

bin/kafka-consumer-groups.sh --zookeeper localhost:2181 --describe --group my-group

查询结果

当然,这种方法是针对高级级kafka读取api,因为高级级api需要按照group中的consumer按照offset来读取数据,并且所有维护offset信息都保存在zookeeper中。但是低级api不需要group,offset由consumer自行维护,所以针对这类topic用户是没法使用这个命令读取结果的。

相关文章

  • Kafka1.0.0如何查看队列消费进度

    按照网上的方法尝试了./kafka-run-class.sh kafka.tools.ConsumerOffset...

  • 2020-06-12

    Redis 没有 ack 机制,当消费失败的情况下队列如何处理? Redis List的特点就是只有消费,没有查看...

  • kafka 1.1.0重置消费进度

    查看当前消费进度(需要消费者在线)./kafka-consumer-groups.sh --bootstrap-s...

  • MQ交接梳理

    一、AMQP 消息队列 如何查看消息是否堆积以及是否有消费者线程? 关注点: 【流入】与【流出】速率相差太大,可能...

  • 消息队列

    为什么使用消息队列?消息队列有什么优点和缺点? 如何保证消息队列高可用?如何保证消息不被重复消费? kafka,a...

  • 什么是阻塞队列?如何使用阻塞队列来实现生产者-消费者模型?

    什么是阻塞队列?如何使用阻塞队列来实现生产者-消费者模型?

  • 队列消费者线程不工作问题排查

    现象:队列在抛出异常后不再进行消费,但是线程仍然存活 查看线程状态 进入docker jps -l查看pid js...

  • 5.7新特性1:查看ddl进度

    导读:如何查看DDL的进度? 使用MariaDB/Percona版本的一个便利之处就是可以及时查看DDL的进度,进...

  • MQ常用命令

    远程队列——qr 可以查看远端队列管理器 和队列名字 查看本地传输队列XMITQ(SIMUtoIPSP) 传输队列...

  • 队列

    1、mq底层是如何实现的?如何保证稳定的消费者生产者队列

网友评论

    本文标题:Kafka1.0.0如何查看队列消费进度

    本文链接:https://www.haomeiwen.com/subject/vsqrnxtx.html