kafka默认的只保存7天的数据，时间一到就删除数据，当遇到磁盘过小，，存放的数据量过大，可以设置缩短这个时间。
log.retention.hours=72
log.cleanup.policy=delete
./kafka-config.sh --zookeeper localhost:2181 --alter --entity-name mytopic --entity_type topics --add-config retention.ms=86400000
查看设置
./kafka-config --zookeeper localhsot:2181 --describle --entity-name mytopic --entity_type topics
立即删除某个topic下面的数据
./kafka-topic.sh --zookeeper localhost:2181 --alter --topic mytopic --config cleanup.policy=delete
kafka默认的只保存7天的数据，时间一到就删除数据，当遇到磁盘过小，，存放的数据量过大，可以设置缩短这个时间。 ...
阿里云上面安装hdp服务 hdfs服务，本地 spark stream 消费kafka数据，在hdfs上面设置保存...
kafka 单独设置某个topic的数据过期时间kafka 默认存放7天的临时数据，如果遇到磁盘空间小，存放数据量...
Kafka是一个分布式消息队列，它将数据分区保存，并将每个分区保存成多份以提高数据可靠性。Kafka是在大数据背景...
Kafka消息保存或缓存在磁盘上，一般认为在磁盘上读写数据是会降低性能的，因为寻址会消耗时间，实际Kafka特性之...
Kafka partition的数据如何保存到硬盘？ 1，首先partition是以文件夹的形式保存到磁盘的，也就...
相关约定 1.kafka安装在/usr/local下 2.数据目录保存在/data*/kafka-logs下 3....
在流式计算中，Kafka一般用来缓存数据，Kafka是一个分布式消息队列；Kafka对消息保存时根据Topic进行...
① 设置幻灯片切换时间 【切换】-【计时】-【设置自动换片时间】 ② 设置文件自动保存 文件-选项-保存-保存自动...
创建NSCache对象 保存数据 读取数据 删除数据 删除所有数据 设置自动回收 设置最大开销设置最大消耗的同时，...
本文标题：2019-11-06 kafka数据保存时间的设置
本文链接：https://www.haomeiwen.com/subject/uaaybctx.html
网友评论