美文网首页
Kafka--02基础

Kafka--02基础

作者: viean | 来源:发表于2018-05-05 20:29 被阅读0次

Kafka相关概念:


Topics (主题)
属于特定类别的消息流称为主题,数据存储在主题中。
主题被拆分成分区,对于每个主题,Kafka保存一个分区的数据,每个这样的分区包含不可变有序序列的消息。分区被实现为具有相等大小的一组分段文件。

Partition (分区)
一个主题有多个分区,因此可处理的消息量非常之多。
Partition offset(分区偏移)
每个分区具有称为offset的唯一序列标识;
Replicas of partition (分区备份)
副本只是分区的一个备份,副本不读取或者写入数据,用于防止数据丢失。

Brokers (经纪人/代理 )
负责维护发布数据的简单系统,每个经纪人中的每个主题可以具有零个或者多个分区。

Kafka Cluster (Kafka集群)
Kafka有多个代理被称为集群。可以扩展Kafka集群,无需停机,这些集群用于管理消息数据的持久性和复制。

producer(生产者)
消息生产者,可发布一种或者多种主题消息(topic)。producer向brokers发送数据,brokers只需要将消息附加到最后一个段文件。实际上,该消息将被附加到分区。

consumers(消费者)
Consumers从经纪人处读取数据。 消费者订阅一个或多个主题,并通过从代理中提取数据来使用已发布的消息。

Leader(领导者)
leader是负责给定分区的所有读取和写入的节点,每个分区都有一个服务器充当leader。

Follower(追随者)
领导者的backup,如果领导失败,一个追随都将自动成为新的领导者。追求者作为正常消息者,拉取消息,并更新其自己的数据存储。

Kafka集群架构


相关文章

  • Kafka--02基础

    Kafka相关概念: Topics (主题)属于特定类别的消息流称为主题,数据存储在主题中。主题被拆分成分区,对于...

  • 机械设备安装技术

    设备基础种类及应用 垫层基础允许产生沉降:大型储罐 浅基础扩展基础联合基础:轧机独立基础 深基础桩基础:适用于需要...

  • 基础,基础,基础

    如果有人现在问我,JAVA该怎么学,我会告诉他不要急于求成,少看视频,多练,多思考。但说到这里有人可能会反...

  • 【Android】知识点汇总,坚持原创ing

    Android基础 Java基础 Java基础——Java内存模型和垃圾回收机制 语法基础 语法基础——C语法基础...

  • Java 基础

    Java 基础01Java开发入门 Java 基础02Java编程基础 Java 基础03面向对象 Java 基础...

  • 零基础学画画从入门到放弃

    零基础应该怎么学画画?零基础那就从基础开始学啊!基础是什么?造型基础和色彩基础。 造型基础就是用点线面组成起码能让...

  • 面试题汇总

    1.Java基础面试问题 Java基础之基础问题 Java基础之面向对象 Java基础之数据结构 Java基础之I...

  • 基础基础还是基础

    这次去面试,还是被基础给打趴下了。 对于PHP7的新特性没有了解。 对于TP的新特性没有了解。 再一个就是独立完成...

  • 零基础学UI设计需要美术基础吗?

    零基础学UI设计需要美术基础吗?零基础学UI设计需要美术基础吗?零基础学UI设计需要美术基础吗?零基础学UI设计需...

  • 基础基础!

    人生中第一个自主设计的实验方案终于得到认可^O^在设计方案过程中认识到基础知识以及细心的重要性,还有半个学期可以努...

网友评论

      本文标题:Kafka--02基础

      本文链接:https://www.haomeiwen.com/subject/rxmerftx.html