美文网首页
Kafka 基本配置

Kafka 基本配置

作者: yepeng05 | 来源:发表于2018-12-06 16:00 被阅读0次

最新在官网中提供的下载的二进制版本中,可以下载到不同scala版本的Kafka,可以从 http://kafka.apache.org/downloads 下载,但本身来说 Kafka 是不依赖 scala 环境的。

Kafka 0.10.X.Y 版本应该也是生产环境中使用得最多的版本(该版本更新最多)
0.10.0.0/0.10.0.1/0.10.1.0/0.10.1.1/0.10.2.0/0.10.2.1/0.10.2.2

Kafka 的命名方式相对有点儿另类(比如 kafka_2.10-0.10.2.2.tgz ),个人更宁愿将其修改为习惯的方式(个人更习惯于CDH的命名格式):

mv kafka_2.10-0.10.2.2/ kafka-0.10.2.2-scala2.10/

Kafka 目录结构如下:

/bin 操作脚本
/config 配置文件
/libs 依赖的库
/logs 日志文件
# kafka把 server 端日志分为5种类型,server, request, state,log-cleaner,controller

需要配置的文件:

# server.properties
broker.id=0
listeners=PLAINTEXT://bigdata-pro05.canc.com:9092    # 新版本 0.10.x 配置弃用了advertised.host.name 和 advertised.port这两个配置项,只配置advertised.listeners就ok
log.dirs=/opt/modules/kafka-0.10.2.2-scala2.10/logs
zookeeper.connect=bigdata-pro04.canc.com:2181,bigdata-pro05.canc.com:2181,bigdata-pro06.canc.com:2181

相关文章

  • Kafka相关文章索引(2)

    基本常识 kafka主要配置 Kafka配置说明 Kafka学习整理四(Producer配置) Kafka学习整理...

  • Kafka 最佳实践

    Kafka 基本配置及性能优化 这里主要是 Kafka 集群基本配置的相关内容。 硬件要求 Kafka 集群基本硬...

  • Kafka 基本配置

    最新在官网中提供的下载的二进制版本中,可以下载到不同scala版本的Kafka,可以从 http://kafka....

  • Kafka基本配置

    服务端的配置文件--server.properties 生产端的配置文件--producer.properties...

  • [Kafka 101-3] 使用Java API消费数据实战

    Kafka 101系列文章目标:整理学习Kafka的基本使用、Kafka的常用配置和Kafka的重要原理。 本文介...

  • Kafka全面讲解

    消息队列 kafka基本框架: zk的安装和配置

  • Kafka配置详解

    kafka基本概念及配置详解 kafka 基本概念 Topic 主题,声明一个主题,producer指定该主题发布...

  • Kafka 2.11 基本配置

    前置条件 /opt/kafka 1.zookeeper 配置 /opt/kafka/config/zookeepe...

  • CDH 组件配置

    kafka外网访问配置 进入kafka 点击配置 搜索kafka.properties 的 Kafka Broke...

  • Druid:Integration with Kafka

    本文介绍在Kafka和Druid整合使用中遇到的问题和解决方法。 1. 基本配置 Druid使用Kafka作为数据...

网友评论

      本文标题:Kafka 基本配置

      本文链接:https://www.haomeiwen.com/subject/dwuocqtx.html