Elasticsearch 报错:index read-only / allow delete (api) 深度解析与解决方案

sh 复制代码
ClusterBlockException[index [.monitoring-es-7-2025.11.12] blocked by: [FORBIDDEN/12/index read-only / allow delete (api)]]

🚨 Elasticsearch 报错:index read-only / allow delete (api) 深度解析与解决方案

💡 关键词:Elasticsearch、磁盘空间不足、监控索引、只读状态


一、问题背景

在一次 Node.js 项目运行过程中,我们的 Elasticsearch 集群突然在日志中疯狂刷出警告:

sh 复制代码
"message": "unexpected error while indexing monitoring document",
"stacktrace": [
  "org.elasticsearch.xpack.monitoring.exporter.ExportException: ClusterBlockException[index [.monitoring-es-7-2025.11.12] blocked by: [FORBIDDEN/12/index read-only / allow delete (api)];]"
]

Kibana 监控页面无法更新,ES 指标面板停止刷新。

但奇怪的是,我们清理了磁盘空间后,问题仍然存在。


二、问题现象

执行 GET _cat/indices?v,可以看到 .monitoring-* 索引状态为 green,但日志仍不断报:

sh 复制代码
index [.monitoring-es-7-2025.11.12] blocked by: [FORBIDDEN/12/index read-only / allow delete (api)];

即使空间已经恢复,Elasticsearch 仍然拒绝对这些索引写入。


三、问题根因分析

1️⃣ Elasticsearch 的自动保护机制

当磁盘使用率超过阈值(默认 95%),ES 会自动触发保护机制:

sh 复制代码
index.blocks.read_only_allow_delete = true

意思是:

• 索引变为只读;

• 只允许删除(防止磁盘被完全写满导致崩溃)。

这是一种「自我保护」,以防止数据写满磁盘导致节点宕机。


2️⃣ 清理空间 ≠ 自动解除锁定

即使你清理了磁盘空间,Elasticsearch 不会自动解锁索引。

这点经常让人误以为"磁盘问题还没解决",其实只是索引状态没恢复。


3️⃣ 监控索引的特殊性

报错中的 .monitoring-es-* 和 .monitoring-kibana-* 属于 X-Pack Monitoring 模块。

Kibana、Metricbeat 等监控数据会持续往这些索引写入。

只要它们被锁定,就会持续抛出 "unexpected error while indexing monitoring document"。


四、解决步骤 ✅

  1. 查看索引只读状态

执行以下命令查看哪些索引被锁定:

sh 复制代码
GET _all/_settings?filter_path=**.blocks.read_only_allow_delete

你会看到类似输出:

sh 复制代码
{
  ".monitoring-es-7-2025.11.12": {
    "settings": {
      "index.blocks.read_only_allow_delete": "true"
    }
  }
}

  1. 清理磁盘空间

  1. 解锁索引

解锁单个索引:

sh 复制代码
PUT .monitoring-es-7-2025.11.12/_settings
{
  "index.blocks.read_only_allow_delete": null
}

或者解锁所有索引(推荐):

sh 复制代码
PUT _all/_settings
{
  "index.blocks.read_only_allow_delete": null
}
  1. 验证结果

再次执行:

sh 复制代码
GET _cat/indices?v

监控索引恢复正常写入后,日志中的 FORBIDDEN/12 报错将停止。


  1. (可选)清理旧监控索引

这些 .monitoring-* 索引每天会自动创建一个新索引(按日期)。

可以清理过期数据节省空间:

sh 复制代码
DELETE .monitoring-es-7-2025.10*
DELETE .monitoring-kibana-7-2025.10*

或者在 elasticsearch.yml 中关闭自动监控:

sh 复制代码
xpack.monitoring.enabled: false

五、延伸:为什么清理磁盘后错误还在?

这是很多人困惑的点。

Elasticsearch 判断磁盘"安全"需要两个条件:

  1. 实际磁盘使用率低于 cluster.routing.allocation.disk.watermark.low(默认 85%);

  2. 索引解除只读状态。

即使你释放了空间,只要第 2 步没做,仍然会报 index read-only / allow delete (api)。


六、总结

问题 原因 解决
报错 FORBIDDEN/12 磁盘满导致索引只读 PUT _all/_settings 解锁
清理磁盘仍报错 ES 不会自动解锁索引 手动恢复只读状态
.monitoring-* 报错 Kibana/ES 自带监控无法写入 解锁或清理监控索引
日志持续警告 未清理旧索引 删除历史 .monitoring-*

七、实战命令汇总

sh 复制代码
# 查看集群磁盘状态
GET _cluster/stats?human

# 查看只读索引
GET _all/_settings?filter_path=**.blocks.read_only_allow_delete

# 全量解锁
PUT _all/_settings
{
  "index.blocks.read_only_allow_delete": null
}

# 删除旧监控索引
DELETE .monitoring-es-7-2025.10*
DELETE .monitoring-kibana-7-2025.10*
相关推荐
新诺韦尔API29 分钟前
手机空号检测接口对接全流程指南
大数据·网络·智能手机·api
知秋正在9961 小时前
ElasticSearch服务端报错:system call filters failed to install
大数据·elasticsearch·搜索引擎
ASTHENIA1 小时前
HNUST-2025年秋-软件工程复习资料
大数据·软件工程
Elasticsearch2 小时前
Elastic Streams 介绍
elasticsearch
金融小师妹2 小时前
基于LSTM趋势预测的白银价格突破58美元阈值,年度累计涨幅超100%的强化学习驱动分析
大数据·人工智能·编辑器·1024程序员节
DashVector2 小时前
如何通过HTTP API删除Doc
大数据·后端·云计算
悟能不能悟3 小时前
登录jenkins默认用户密码
运维·jenkins
Light603 小时前
星火链智:领码SPARK融合平台与湖北数据知识产权综合服务平台全栈对接技术白皮书
大数据·零信任安全·领码spark·数据知识产权·ipaas集成·ai数据治理
beijingliushao3 小时前
100-Spark Local模式部署
大数据·python·ajax·spark
一水鉴天3 小时前
整体设计 定稿 之19 拼语言表述体系之2(codebuddy)
大数据·前端·人工智能·架构