【Elasticsearch】索引快照并还原到其他集群

【Elasticsearch】索引快照并还原到其他集群

前提:es节点的所有用户id和组id都需要相同,最好在新建集群时指定用户id和组id,否则挂载后执行curl时会提示权限报错。

解决方法(gpt生成),不敢在生产尝试。
点我

一、安装共享文件系统

1.启动nfs
bash 复制代码
systemctl start nfs rpcbind
2. 编辑nfs文件

vi /etc/exports

/opt/public 192.168.113.0/24(rw,no_root_squash,insecure,sync)

3. 修改共享目录用户

比如elasticsearch使用的是es用户,用户权限这里要修改为es

bash 复制代码
chown es.es /opt/public

查看状态

bash 复制代码
exportfs -rv

查看挂载源

bash 复制代码
showmount -a

二、ES配置

1.各个节点挂载共享目录到repo指定目录,这里可不重启es

我这里配置的path.repo

path.repo: /home/elasticsearch-7.9.1/repository

bash 复制代码
mount -t nfs 192.168.113.101:/opt/public /home/elasticsearch-7.9.1/repository
2. 新建存储库
bash 复制代码
curl -u elastic -H 'Content-type: application/json' -XPUT 'http://192.168.113.101:9200/_snapshot/my_fs_backup' -d '{
 "type": "fs",
 "settings": {
  "location": "my_fs_backup_location"
 }
}'
3. 新建快照("metrics_38")
bash 复制代码
curl -u elastic -H 'Content-type: application/json' -XPUT 'http://192.168.113.101:9200/_snapshot/my_fs_backup/metrics_38?wait_for_completion=true' -d '{
 "indices": "metrics_38"
}'

可以快照所有索引,使用"-"可以剔除指定的索引index1和index2

{

"indices": "*,-index1,-index2"

}

4. 查看快照状态

curl -u elastic -H 'Content-type: application/json' -XGET 'http://192.168.113.101:9200/_snapshot/my_fs_backup/metrics_38'

5. 后台查看数据

#repo.data: /home/elasticsearch-7.9.1/repository

复制代码
cd /home/elasticsearch-7.9.1/repository/my_fs_backup_location
du -sh

三、还原到其他ES集群

索引名称不能冲突。

1. 拷贝文件到path.repo目录下
2. 在其他上还原es集群上,新建存储库
复制代码
curl -H 'Content-type: application/json' -XPUT 'http://127.0.0.1:9200/_snapshot/my_fs_backup' -d '{
 "type": "fs",
 "settings": {
  "location": "my_fs_backup_location"
 }
}'
4. 还原快照,等待green
复制代码
curl -H 'Content-type: application/json' -XPOST 'http://127.0.0.1:9200/_snapshot/my_fs_backup/metrics_38/_restore' -d '{
 "indices": "metrics_38",
 "rename_pattern": "(.+)"
}'
5. 批量还原
复制代码
curl -H 'Content-type: application/json' -XPOST 'http://192.168.113.195:9200/_snapshot/my_fs_backup/metrics_38/_restore' -d '{
 "indices": "*",
 "rename_pattern": "(.+)",
  "rename_replacement": "restored-$1"
}'
相关推荐
Leo.yuan几秒前
不同数据仓库模型有什么不同?企业如何选择适合的数据仓库模型?
大数据·数据库·数据仓库·信息可视化·spark
Britz_Kevin17 分钟前
从零开始的云计算生活——第六十天,志在千里,使用Jenkins部署K8S
云计算·jenkins·生活
chat2tomorrow20 分钟前
数据采集平台的起源与演进:从ETL到数据复制
大数据·数据库·数据仓库·mysql·低代码·postgresql·etl
TDengine (老段)1 小时前
TDengine 选择函数 Max() 用户手册
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
乐迪信息1 小时前
乐迪信息:AI摄像机在智慧煤矿人员安全与行为识别中的技术应用
大数据·人工智能·算法·安全·视觉检测
全糖去冰吃不了苦1 小时前
ELK 集群部署实战
运维·jenkins
-KamMinG2 小时前
“从零到一:使用GitLab和Jenkins实现自动化CI/CD流水线”
自动化·gitlab·jenkins
万邦科技Lafite4 小时前
实战演练:通过API获取商品详情并展示
大数据·数据库·python·开放api接口
在未来等你4 小时前
Elasticsearch面试精讲 Day 14:数据写入与刷新机制
大数据·分布式·elasticsearch·搜索引擎·面试
黄焖鸡能干四碗4 小时前
智慧教育,智慧校园,智慧安防学校建设解决方案(PPT+WORD)
java·大数据·开发语言·数据库·人工智能