美文网首页
kafka的安装和使用(单节点单broker)

kafka的安装和使用(单节点单broker)

作者: 匪_3f3e | 来源:发表于2018-10-29 16:46 被阅读0次

    下载安装zookeeper

    下载地址:http://archive.cloudera.com/cdh5/cdh/5/ (选择自己需要的版本)
    我下载的版本:http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz
    下载完成后解压到指定目录。
    选择合适的路径,运行以下代码

    wget http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz
    tar -zxvf zookeeper-3.4.5-cdh5.7.0.tar.gz
    cd zookeeper-3.4.5-cdh5.7.0/conf
    cp zoo_sample.cfg zoo_sample.cfg
    vi zoo.cfg
    

    修改如下代码

    dataDir=(你自己新建的文件夹路径)
    

    运行zookeeper

    ../bin/zkServer.sh start
    

    下载安装kafka

    下载地址:http://kafka.apache.org/downloads
    我下载的版本:https://archive.apache.org/dist/kafka/0.9.0.0/kafka_2.11-0.9.0.0.tgz (注意看自己scala的版本)
    1)下载完成后解压到指定目录,
    2)修改config文件夹下的server.properties文件,修改log.dirs的值为自己新建的文件夹
    3)在bin目录下执行以下操作

    kafka的使用

    启动kafka

    #./kafka-server-start.sh [-daemon] server.properties [--override property=value]*
    ./kafka-server-start.sh  $KAFKA_HOME/config/server.properties
    

    创建topic

    ./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic my_topic
    

    查看topic

    ./kafka-topics.sh --list --zookeeper localhost:2181
    

    开启新的窗口,启动生产者,输入信息,观察消费者

    ./kafka-console-producer.sh --broker-list localhost:9092 --topic test
    

    开启新的窗口,启动消费者

    # --from-beginning:从头开始消费
    ./kafka-console-consumer.sh --zookeeper localhost:2181 --topic my_topic --from-beginning
    

    查看describe

    ./kafka-topics.sh --describe --zookeeper localhost:2181
    ./kafka-topics.sh --describe --zookeeper localhost:2181 --topic my_topic
    
    Topic:my_topic  PartitionCount:1    ReplicationFactor:1 Configs:
        Topic: my_topic Partition: 0    Leader: 0   Replicas: 0 Isr: 0
    

    相关文章

      网友评论

          本文标题:kafka的安装和使用(单节点单broker)

          本文链接:https://www.haomeiwen.com/subject/tzibtqtx.html