美文网首页
2020-05-27

2020-05-27

作者: 漩涡佐助栋 | 来源:发表于2020-06-30 09:34 被阅读0次

RocketMQ Pull接口说明文档

订阅模式

Pull接口一共有两种订阅模式,两种订阅模式互斥。

  1. subscribe:订阅topic,参与rebalance。

  2. assign:用户自己指定需要订阅的队列,不参与rebalance。

重要接口说明

接口所在的类:org.apache.rocketmq.client.consumer.DefaultLitePullConsumer

  • void start() :启动consumer。

  • void shutdown():关闭consumer。

  • void subscribe(String topic, String subExpression):订阅某topic,可多次调用订阅多个topic。与assign方法互斥。

  • void unsubscribe(String topic):取消订阅某个topic。

  • void assign(Collection<MessageQueue> messageQueues):手动指定需要订阅的队列。与subscribe方法互斥。此接口不允许增量指定队列,如果被调用多次会替换掉原来订阅的队列。

  • List<MessageExt> poll() | List<MessageExt> poll(long timeout):向指定的topic(subscribe模式)或者手动指定的队列(assign模式)拉取消息。如果超时仍未获取到消息则返回null。

  • void seek(MessageQueue messageQueue, long offset):指定某个队列下次需要消费(拉取)的位置。如果同一个队列被调用多次,以最后指定的offset为准。需要注意该接口必须在consumer start以后被调用,且参数messagequeue必须在subscribe模式下被分配到的队列中(由于rebalance需要时间,因此subscribe后马上调用seek可能会抛出异常)或者assgin模式下用户指定的队列中,否则会抛出异常。如果指定的offset超出了队列最大或最小的offset,也会抛出异常。

  • void pause(Collection<MessageQueue> messageQueues) :暂停指定队列消息的拉取(不会引起rebalance)。特别注意该方法只会停止队列的拉取,但由于poll接口实现采用预拉取的方式(消息会被拉取到缓存中),因此不会马上暂停这些队列相关消息的消费,当缓存中这些队列的消息被完全消费完后,才会暂停消费。

  • void resume(Collection<MessageQueue> messageQueues):恢复指定队列消息的拉取。与pause接口对应。

  • Long offsetForTimestamp(MessageQueue messageQueue, Long timestamp):按时间戳查找给定队列的偏移量。与RocketMQ原来的API一致。

  • Collection<MessageQueue> fetchMessageQueues(String topic):获取某个topic下所有队列的信息。注意该接口必须在consumer start后才能被调用。

  • registerTopicMessageQueueChangeListener(String topic, TopicMessageQueueChangeListener topicMessageQueueChangeListener):监听某个topic队列的变换,如果队列发生变化(比如发生扩/缩容),回调Listener函数。由于定时线程检查,会有一定的延迟。

  • void setAutoCommit(boolean autoCommit):设置是否自动提交消费位点。默认为自动提交。如果采用自动提交,如果发生异常或程序崩溃,不会发生消息丢失,但可能会发生重复消费。

  • void commitSync():手动提交当前被分配到的队列(subscribe模式)或者assign的队列的消费位点。

注意:一些需要网络通信的接口比如seek,fetchMessageQueue等需要在start接口后被调用。

Example

具体API的用法可以参考Kafka,但也有区别。这里列出了两种订阅模式的基本用法。

  • subscribe用法

    public class LitePullConsumerSubscribe {
    
        public static volatile boolean running = true;
    
        public static void main(String[] args) throws Exception {
            DefaultLitePullConsumer litePullConsumer = new DefaultLitePullConsumer("please_rename_unique_group_name");
            litePullConsumer.subscribe("TopicTest", "*");
            litePullConsumer.start();
            try {
                while (running) {
                    List<MessageExt> messageExts = litePullConsumer.poll();
                    if (messageExts != null) {
                        System.out.printf("%s%n", messageExts);
                    }
                }
            } finally {
                litePullConsumer.shutdown();
            }
        }
    }
    
  • assign用法

    public class LitePullConsumerAssign {
    
        public static volatile boolean running = true;
    
        public static void main(String[] args) throws Exception {
            DefaultLitePullConsumer litePullConsumer = new DefaultLitePullConsumer("please_rename_unique_group_name");
            litePullConsumer.setAutoCommit(false);
            litePullConsumer.start();
            Collection<MessageQueue> mqSet = litePullConsumer.fetchMessageQueues("TopicTest");
            List<MessageQueue> list = new ArrayList<>(mqSet);
            List<MessageQueue> assignList = new ArrayList<>();
            for (int i = 0; i < list.size() / 2; i++) {
                assignList.add(list.get(i));
            }
            litePullConsumer.assign(assignList);
            litePullConsumer.seek(assignList.get(0), 10);
            try {
                while (running) {
                    List<MessageExt> messageExts = litePullConsumer.poll();
                    System.out.printf("%s %n", messageExts);
                    litePullConsumer.commitSync();
                }
            } finally {
                litePullConsumer.shutdown();
            }
    
        }
    }
    

相关文章

  • 简单入门 MIPS

    title: 简单入门 MIPSdate: 2020-05-27 09:20:42 0. 前言 long long...

  • 代码优化 5 大原则,第一条就是别优化了!!!

    2020-05-27 09:41:00 本文来源「优达学城」原作:Ravi Shankar Rajan ,译者:欧...

  • 滑动窗口之三体会-队列本质 2021-02-21(未允禁转)

    系列链接1.滑动窗口问题(统计型约束的连续子串问题)2020-05-27[https://www.jianshu....

  • 2020-05-27天天淘联盟的种花日记

    2020-05-27 番茄 开始已经开花并有些结果 辣椒-依旧太密集 预计本周日打算全部进行移栽 黄皮-这既是第二...

  • 家有四宝!龙凤成长记之第17天

    2020-05-27 1. 昨晚儿子说,他因为晚睡晚起,起床后感觉很累,他就在网上搜“有效率睡眠”,上面说,无论你...

  • ~~“渡”~~

    还会有人2020-05-27 23:26:30 什么是渡? 渡,是一种包容, 渡,是一种豁达, 渡,是一种与世无争...

  • 2020-05-28

    2020-05-27 成长日志第342天 家名:温暖有爱之家 家规:真诚待人不自欺,学会看见懂得感恩,正面如是的表...

  • 钟摆

    2020-05-27辛巳月庚午日 天气闷热,湿度大,气压低,让人的心情也是湿哒哒的。昨天有人感慨说,学习成长后一改...

  • 强心手印

    2020-05-27文/书童整理,版权除其他注明外,均为We身体恢复工作室所有,是本人学习瑜伽所做的备课笔记,仅作...

  • 家乡 (对联)

    望远太平山,村庄棋布星罗,城岸厂房连碧岭; 感怀新世界,百姓财丰物阜,乡村华厦耀晴空。 2020-05-27于宁德

网友评论

      本文标题:2020-05-27

      本文链接:https://www.haomeiwen.com/subject/qfkgahtx.html