elasticsearch索引数据备份与恢复

elasticsearch备份与恢复

1.配置备份文件目录配置

在 config/elasticsearch.yml 文件中加入如下配置:

shell 复制代码
# 配置单个备份文件目录
path.repo: ["/backups/my_backup"]

# 配置多个备份文件目录
path.repo: 
  - "/backups/my_backup"
  - "/backups/fx_backup"

配置完成后需重启es服务。

2.创建备份仓库并查看

shell 复制代码
curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/仓库名' -u 用户名:密码 -d '{"type": "fs","settings": {"location":"备份仓库路径","compress": true}}'

# 在/backups/my_backup下新建名为my_backup的仓库
curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/my_backup' -u elastic:123456 -d '{"type": "fs","settings": {"location":"/backups/my_backup","compress": true}}'

# 在/backups/fx_backup下新建名为fx_backup的仓库
curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/fx_backup' -u elastic:123456 -d '{"type": "fs","settings": {"location":"/backups/fx_backup","compress": true}}'

# 查看仓库信息
curl -XGET 'http://127.0.0.1:9200/_snapshot?pretty' -u elastic:123456

# 返回的仓库信息
{
  "my_backup" : {
    "type" : "fs",
    "settings" : {
      "compress" : "true",
      "location" : "/backups/my_backup"
    }
  },
  "fx_backup" : {
    "type" : "fs",
    "settings" : {
      "compress" : "true",
      "location" : "/backups/fx_backup"
    }
  }
}

# 删除备份仓库
# curl -X DELETE "localhost:9200/_snapshot/仓库名" -u elastic:123456
# curl -X DELETE "localhost:9200/_snapshot/my_backup" -u elastic:123456

3.备份索引数据

shell 复制代码
# 备份单个索引数据
# curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/仓库名/备份名' -d '{"indices": "索引名"}' -u 用户名:密码

# 备份多个索引数据
# curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/仓库名/备份名' -d '{"indices": "索引名1,索引名2,索引名3"}' -u 用户名:密码
curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/my_backup/my_test_2025' -d '{"indices": "my_test_1,my_test_2"}' -u elastic:123456

curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/fx_backup/fx_test_2025?wait_for_completion=true' -d '{"indices": "fx_test_1,fx_test_2"}' -u elastic:123456
# wait_for_completion=true 是指该api在备份执行完毕后再返回结果,否则默认是异步执行的。线上执行时不用设置该参数,让其在后台异步执行即可。

# 备份全部
# curl -XPUT -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/仓库名/备份名' -u 用户名:密码

# 查看备份的索引
# curl -XGET 'http://127.0.0.1:9200/_snapshot?pretty' -u 用户名:密码

4.恢复备份索引数据

shell 复制代码
# 恢复索引前要确保目标es集群中没有存在相同的索引名,或者恢复时重命名索引名。
# 删除索引语法(支持通配符):
# curl -XDELETE "http://127.0.0.1:9200/索引名" -u 用户名:密码

# 恢复单个索引数据
# curl -XPOST -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/仓库名/备份名/_restore' -d '{"indices": "索引名"}' -u 用户名:密码
curl -XPOST -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/my_backup/my_test_2025/_restore' -d '{"indices": "my_test_1"}' -u elastic:123456

# 恢复多个索引数据
curl -XPOST -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/fx_backup/fx_test_2025/_restore' -d '{"indices": "fx_test_1,fx_test_2"}' -u elastic:123456

# 恢复索引并重命名索引名
# curl -XPOST -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/my_backup/备份名/_restore' -d '{"indices": "原索引名","rename_pattern": "原索引名","rename_replacement": "新索引名"}' -u 用户名:密码


# 查看恢复状态:
# curl -XGET "http://127.0.0.1:9200/_snapshot/仓库名/备份名/_status" -u 用户名:密码
curl -XGET "http://127.0.0.1:9200/_snapshot/fx_backup/fx_test_2025/_status" -u elastic:123456

#即只恢复指定索引名数据,下面以索引名为fx_*开头的索引数据为例,注意不要恢复".security-6"的索引,这个索引记录了用户认证信息,不能被删除
# curl -XPOST -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_snapshot/my_backup/snapshot_all/_restore' -d '{"indices": "fx_*"}'  -u 用户名:密码


# 查看索引名:

# curl http://127.0.0.1:9200/_cat/indices?v -u 用户名:密码

curl http://127.0.0.1:9200/_cat/indices?v -u elastic:123456
  • 参数说明:
    • indices:只恢复匹配的索引,忽略快照中存在的其他索引,可支持通配符。
    • rename_pattern:查找所提供的模式能匹配上的正在恢复的索引。用来正则匹配要恢复的索引,并且重命名。
    • rename_replacement:将匹配的索引重命名成替代的模式。用来正则匹配要恢复的索引,并且重命名。

注:由于es创建的用户信息会存放在.security-6索引中(不能删除),所以在恢复时要排除该索引名的恢复。

相关推荐
Elasticsearch4 小时前
如何使用 Agent Builder 排查 Kubernetes Pod 重启和 OOMKilled 事件
elasticsearch
Elasticsearch1 天前
通用表达式语言 ( CEL ): CEL 输入如何改进 Elastic Agent 集成中的数据收集
elasticsearch
武子康1 天前
大数据-236 离线数仓 - 会员指标验证、DataX 导出与广告业务 ODS/DWD/ADS 全流程
大数据·后端·apache hive
武子康2 天前
大数据-235 离线数仓 - 实战:Flume+HDFS+Hive 搭建 ODS/DWD/DWS/ADS 会员分析链路
大数据·后端·apache hive
DianSan_ERP3 天前
电商API接口全链路监控:构建坚不可摧的线上运维防线
大数据·运维·网络·人工智能·git·servlet
够快云库3 天前
能源行业非结构化数据治理实战:从数据沼泽到智能资产
大数据·人工智能·机器学习·企业文件安全
AI周红伟3 天前
周红伟:智能体全栈构建实操:OpenClaw部署+Agent Skills+Seedance+RAG从入门到实战
大数据·人工智能·大模型·智能体
B站计算机毕业设计超人3 天前
计算机毕业设计Django+Vue.js高考推荐系统 高考可视化 大数据毕业设计(源码+LW文档+PPT+详细讲解)
大数据·vue.js·hadoop·django·毕业设计·课程设计·推荐算法
计算机程序猿学长3 天前
大数据毕业设计-基于django的音乐网站数据分析管理系统的设计与实现(源码+LW+部署文档+全bao+远程调试+代码讲解等)
大数据·django·课程设计
B站计算机毕业设计超人3 天前
计算机毕业设计Django+Vue.js音乐推荐系统 音乐可视化 大数据毕业设计 (源码+文档+PPT+讲解)
大数据·vue.js·hadoop·python·spark·django·课程设计