下载安装zookeeper
下载地址:http://archive.cloudera.com/cdh5/cdh/5/ (选择自己需要的版本)
我下载的版本:http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz
下载完成后解压到指定目录。
选择合适的路径,运行以下代码
wget http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz
tar -zxvf zookeeper-3.4.5-cdh5.7.0.tar.gz
cd zookeeper-3.4.5-cdh5.7.0/conf
cp zoo_sample.cfg zoo_sample.cfg
vi zoo.cfg
修改如下代码
dataDir=(你自己新建的文件夹路径)
运行zookeeper
../bin/zkServer.sh start
下载安装kafka
下载地址:http://kafka.apache.org/downloads
我下载的版本:https://archive.apache.org/dist/kafka/0.9.0.0/kafka_2.11-0.9.0.0.tgz (注意看自己scala的版本)
1)下载完成后解压到指定目录,
2)修改config文件夹下的server.properties文件,修改log.dirs的值为自己新建的文件夹
3)在bin目录下执行以下操作
kafka的使用
启动kafka
#./kafka-server-start.sh [-daemon] server.properties [--override property=value]*
./kafka-server-start.sh $KAFKA_HOME/config/server.properties
创建topic
./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic my_topic
查看topic
./kafka-topics.sh --list --zookeeper localhost:2181
开启新的窗口,启动生产者,输入信息,观察消费者
./kafka-console-producer.sh --broker-list localhost:9092 --topic test
开启新的窗口,启动消费者
# --from-beginning:从头开始消费
./kafka-console-consumer.sh --zookeeper localhost:2181 --topic my_topic --from-beginning
查看describe
./kafka-topics.sh --describe --zookeeper localhost:2181
./kafka-topics.sh --describe --zookeeper localhost:2181 --topic my_topic
Topic:my_topic PartitionCount:1 ReplicationFactor:1 Configs:
Topic: my_topic Partition: 0 Leader: 0 Replicas: 0 Isr: 0
网友评论