美文网首页
kafka操作步骤

kafka操作步骤

作者: 人活一世 | 来源:发表于2017-09-13 21:57 被阅读0次

        简介:下面是kafka集群的一些操作步骤,由于步骤较多在这里写下来,一来整理一下记忆、二来以防自己遗忘后没有熟悉的操作说明。以下内容都是建立在kafka集群搭建好后的基础上的。

一、开启kafka集群

开启zookeeper集群(千万不要开启kafka自带的zookeeper集群)

zkServer.sh start &

有多少台虚拟要就要开启多少次,建议在后面加& 让集群在后台运行

启动成功后输入jps看一下进程

三台虚拟机上都显示出QuorumPeerMain然表示zookeeper启动成功

然后是启动KAFKA服务(每台虚拟机都需要启动一次)

bin/kafka-server-start.sh config/server.properties &

开启成功后用jps看一下进程

每台虚拟机上都有kafka这个进程,表示kafka启动成功了.

下面要做一个通信接收功能

首先创建 topic(ip是本机ip)

bin/kafka-topics.sh --create --zookeeper 192.168.200.11:2181 --replication-factor 2 --partitions 1 --topic elm

创建一个producer,发布者(ip是主机ip)

bin/kafka-console-producer.sh --broker-list 192.168.200.11:9092 --topic elm

创建一个consumer, 订阅者(ip是本机ip)

bin/kafka-console-consumer.sh --bootstrap-server 192.168.200.13:9092 --topic elm --from-beginning

然后发送都发布消息、订阅者接收到消息,则证明kafka集群搭建成功 


查看topic列表

bin/kafka-topics.sh --list --zookeeper localhost:2181

相关文章

  • kafka操作步骤

    简介:下面是kafka集群的一些操作步骤,由于步骤较多在这里写下来,一来整理一下记忆、二来以防自己遗忘后没...

  • 2019-07-25 Linux设置systemd开机自启动服务

    操作步骤 1.进入/usr/lib/systemd/system/kafka.service下,vim新建文件ka...

  • Kafka 详解一 简介

    目录 Kafka 是什么 Kafka 核心组 Kafka 整体架构以及解析 Kafka数据处理步骤 Kafka名词...

  • kafka详解

    目录 Kafka 是什么 Kafka 核心组 Kafka 整体架构以及解析 Kafka数据处理步骤 Kafka名词...

  • Kafka自学系列(一)本地搭建&使用

    一、下载kafka & 解压 & 启动 核心步骤 启动zookeeper 启动kafka 详细步骤 1,启动zoo...

  • docker部署kafka

    简单明了,直接上步骤,首先,虚拟机环境,centos,docker都已搞定。略过,直接操作部署kafka. 镜像拉...

  • kafka安装

    kafka 集群安装 Kafka常用操作命令

  • Apache Kafka -3 安装步骤

    Apache Kafka教程 之 Apache Kafka - 安装步骤 原文地址: http://blogxi...

  • 使用php连接操作kafka

    使用php连接操作kafka,从安装kafka到引入php扩展来操作kafka。 一、安装 注:需安装JDK 1....

  • 6.Otter操作流程

    Otter操作流程 1.步骤 首先要去otter配置相应属性; 其次,配合数仓以及实时kafka部分建表建主题; ...

网友评论

      本文标题:kafka操作步骤

      本文链接:https://www.haomeiwen.com/subject/uhblsxtx.html