美文网首页
kafka 新建消费组 如何消费信息

kafka 新建消费组 如何消费信息

作者: NazgulSun | 来源:发表于2021-01-25 15:16 被阅读0次

对于已有的一个topicA, 他一直都存在数据的生产
目前新建一个权限的group= group_new, 启动group_new 的时候,会从哪里开始消费数据?

是消费topicA 最新的数据吗? 还是从 历史库中第一条开始消费呢?

auto.offset.reset关乎kafka数据的读取,是一个非常重要的设置。常用的二个值是latest和earliest,默认是latest。

一,latest和earliest区别

1,earliest 当各分区下有已提交的offset时,从提交的offset开始消费;无提交的offset时,从头开始消费

2,latest 当各分区下有已提交的offset时,从提交的offset开始消费;无提交的offset时,消费新产生的该分区下的数据

提交过offset,latest和earliest没有区别,但是在没有提交offset情况下,用latest直接会导致无法读取旧数据。

相关文章

网友评论

      本文标题:kafka 新建消费组 如何消费信息

      本文链接:https://www.haomeiwen.com/subject/wotizktx.html