Kibana管理ES生命周期

希望通过Kibana界面管理ES索引的生命周期

版本:7.15.2

创建索引模板

创建索引模板方便匹配索引,对匹配到的一批索引采用同一套生命周期管理策略,例如开发环境的所有索引以dev-开头,可以创建样式为dev-*的索引模板以匹配开发环境的所有索引。

主要设置模板名称和索引匹配样式,其它默认即可。

更多索引模板信息请戳

创建生命周期管理策略

Elastic ILM(Index Lifecycle Management)是Elasticsearch提供的一种功能,用于自动化管理索引的生命周期。它通过在索引的不同阶段执行预设的动作,帮助用户实现索引从创建到删除的全自动管理,降低了索引管理的成本。

ILM通常包括Hot、Warm、Cold和Delete这四个阶段,每个阶段都有其特定的优化目标和操作。

  • Hot阶段:此阶段主要针对新创建或频繁更新的索引。优化目标是高写入速度和实时查询性能。在这个阶段,索引可能会被放置在高性能硬件上,并拥有较多的副本以保证可用性。
  • Warm阶段:当索引不再频繁更新但仍需要被查询时,它会进入Warm阶段。在这个阶段,可以执行如段合并等操作来减少存储占用并提高查询效率。此外,索引可能会被迁移到成本较低的硬件上。
  • Cold阶段:对于很少被查询的数据,ILM会将其移动到Cold阶段。在这个阶段,数据通常会被压缩并存储在更便宜的存储介质上,以进一步降低成本。
  • Delete阶段:当数据达到其保留期限或不再需要时,ILM会自动删除索引,从而释放存储空间。

简单实践

简单实践分两阶段:热阶段和删除阶段。既热数据直接到删除阶段。

热阶段配置如下:

删除阶段配置如下:

主要是配置留存的时间,上述配置代码保留30天以内的数据,超过三十天的会移入到删除阶段等待删除。

链接

干货 | Elasticsearch 索引生命周期管理 ILM 实战指南
Elastic ILM 索引生命周期管理最佳实践

相关推荐
跨境摸鱼18 分钟前
低价模型承压阶段跨境品牌如何把重心转向复购与客单
大数据·人工智能·跨境电商·亚马逊·跨境
果汁华1 小时前
LangGraph:构建状态化 AI 代理的革命性编排框架
大数据·人工智能
面向Google编程1 小时前
从零学习Kafka:生产者分区机制
大数据·kafka
盘古信息IMS1 小时前
全域场景重构,激活智造新未来!盘古信息机加行业数智化解决方案深度解析
大数据·人工智能
跨境卫士-小汪2 小时前
多国站点利润分化加剧跨境卖家如何重新排优先级
大数据·人工智能·产品运营·跨境电商·跨境
精益数智工坊2 小时前
物料管理是什么?物料管理的具体工作有哪些?
大数据·前端·数据库·人工智能·精益工程
xixixi777772 小时前
全模态原生大脑降临:GPT-5.5(Spud)发布,推理/编码提升30%,百万上下文+原生电脑控制,开启Agent新纪元
大数据·网络·人工智能·gpt·安全·电脑·量子计算
MoonBit月兔2 小时前
MoonBit 大型软件合成挑战赛决赛暨 Meetup 0.9 版本专场回顾
大数据·开发语言·人工智能·moonbit
互联网推荐官2 小时前
大模型应用开发的上下文工程与推理链路深度拆解
大数据·运维·人工智能
cui17875683 小时前
打破社区固有僵局,重塑物业、业主、商家新生态
大数据