现象

通过kibana看不到日志
看管道监控，发现日志写入速率为0

image.png

然后看logstash日志，发现报错

retrying failed action with response code: 429 ({"type"=>"cluster_block_exception", "reason"=>"index [apm-7.9.0-2022.04.08] blocked by: [TOO_MANY_REQUESTS/12/disk usage exceeded flood-stage watermark, index has read-only-allow-delete block];"})

原因

通过百度，查到的原因是：
是因为一次请求中批量插入的数据条数巨多，以及短时间内的请求次数巨多引起ES节点服务器内存超过限制，ES主动给索引上锁。

解决方案是：

PUT _all/_settings
{
  "index.blocks.read_only_allow_delete": null
}

es 无日志，logstash 报错
现象通过kibana看不到日志看管道监控，发现日志写入速率为0 然后看logstash日志，发现报错原因通过...
ELK
1 概述 es 以json格式存储logstash 日志收集kibana es web控制台 es安装 kiban...
ElasticSearch第三篇:安装Logstash
ElasticSearch安装Logstash Logstash是ES下的一款开源软件，对你的日志进行收集、过滤，...
使用elk收集应用日志
使用elk收集应用日志使用redis作为broker，logstash作为indexer，收集日志进入es。相...
监控
监控的维度：前端业务应用层（日志：logstash/kafaka/es/Kibana。调用链：cat/zip...
springboot搭建ELK环境
在工程中使用logback记录日志，通过logstash的tcp传入es需要安装的软件 elasticsearch...
ELK 日志收集配置实战
0x00 关于ELK认识 Logstash : 日志文件收集过滤,转格式, 并推送数据到 es ElasticSe...
ElasticSearch-磁盘空间不够引起的问题
es 6.2.4版本logstash跑了一阵子之后不再同步数据了,日志信息如下：检查elasticsearch日...
ES mapping—date 字段的坑
故事是这样开始~~~ 发现数据从消息队列里能看到，但是并没有存入ES。于是去查看ES日志，果真有报错，报错如下： ...
Linux安装Logstash
前言 logstash是ELK日志系统中的一部分，主要承担将收集完成日志进行过滤，并且输出到es的职责。 Logs...