美文网首页
Linux-使用kafka自带程序操作topic

Linux-使用kafka自带程序操作topic

作者: Linux运维菜 | 来源:发表于2019-03-12 23:18 被阅读0次

前言

收集一些在终端下操作kafka的常用命令。

常用命令

切换到kafka目录进行操作

cd /opt/kafka

创建topic

./bin/kafka-topics.sh --create --zookeeper 127.0.0.1:2181 --partitions 3 --replication-factor 2 --topic test

查看所有的topic

./bin/kafka-topics.sh --list --zookeeper 127.0.0.1:2181

查看指定的topic

./bin/kafka-topics.sh --list --zookeeper 127.0.0.1:2181 --topic test

查看指定topic详情(分区、备份等)

./bin/kafka-topics.sh --describe --zookeepe 127.0.0.1:2181 --topic test

修改topic的partition

./kafka-topics.sh --alter --topic topic1 --zookeeper 127.0.0.1:2181 --partitions 6

往某topic生产消息

bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test

从某topic消费消息

bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning #(默认用一个线程消费指定topic的所有分区的数据)

topic 分区扩容 修改为10个分区

bin/kafka-topics.sh --zookeeper localhost:2181 -alter --partitions 10 --topic test1

查询消费组

bin/kafka-consumer-groups.sh --zookeeper localhost:2181 --list

查看消费者信息

bin/kafka-consumer-groups.sh --zookeeper localhost:2181 --describe test

修改topic日志保留时间(毫秒)

bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --alter --topic test --config retention.ms=43200000

相关文章

  • Linux-使用kafka自带程序操作topic

    前言 收集一些在终端下操作kafka的常用命令。 常用命令 切换到kafka目录进行操作 cd /opt/kafk...

  • 注意随手修正性能瑕疵

    通过使用shennong的kafka测试程序,得到的单topic单客户端结果较kafka自带的bench结果落后几...

  • kafka笔记

    docker运行Kafka kafka操作命令 进入容器 创建topic 查看topic 删除topic 启动生产...

  • Kafka 消费者 Java 实现

    应用程序使用 KafkaConsumer向 Kafka 订阅 Topic 接收消息,首先理解 Kafka 中消费者...

  • Centos-刚搭建的kafka,性能如何!

    前言 想简单测试一下刚搭建的kafka的性能怎么样? 可以使用自带的测试程序进行简单的测试! 创建测试topic ...

  • Kafka学习笔记03(Topic操作命令)

    topic操作命令 topic 创建位置 kafka/logtopicname-0(topic创建以topic名称...

  • kafka 常用命令

    Kafka常用topic操作命令汇总 offset topic consumer-group consumer p...

  • Flink中串行的陷阱

    问题背景 在使用FlinkSql做topic复制程序时,遇到一个问题:一份kafka topic数据往多个topi...

  • kafka删除topic

    删除kafka topic及其数据,严格来说并不是很难的操作。但是,往往给kafka 使用者带来诸多问题,发现都会...

  • kafka_2.11-0.10.1.0部署

    下载ZK和Kafka ZK部署 Kafka部署 简单使用1、启动 2、创建topic 3、查看所有topic 4、...

网友评论

      本文标题:Linux-使用kafka自带程序操作topic

      本文链接:https://www.haomeiwen.com/subject/amzopqtx.html