【Elasticsearch】索引快照并还原到其他集群

【Elasticsearch】索引快照并还原到其他集群

前提：es节点的所有用户id和组id都需要相同，最好在新建集群时指定用户id和组id，否则挂载后执行curl时会提示权限报错。
解决方法（gpt生成），不敢在生产尝试。
点我
解决方法
所有节点都新建和nfs相同用户id和组id的用户，比如先查看NFS节点和所有ES节点是否存在组id和用户id都是1014的，如果没有，则可以使用以下方法解决挂载后，es权限限制问题。

groupadd -g 1014 read
useradd -u 1004 -g 1014 read
vi /etc/exports
/opt/public 192.168.113.0/24(rw,all_squash,sync,anonuid=0,anongid=0)
systemctl restart nfs rpcbind
chown read.read /opt/public

此时每个es节点挂载共享目录后，可以正常快照备份索引。

一、安装共享文件系统

1.启动nfs

systemctl start nfs rpcbind

2. 编辑nfs文件

vi /etc/exports
/opt/public 192.168.113.0/24(rw,no_root_squash,insecure,sync)

3. 修改共享目录用户

比如elasticsearch使用的是es用户，用户权限这里要修改为es

chown es.es /opt/public

查看状态

exportfs -rv

查看挂载源

showmount -a

二、ES配置

1.各个节点挂载共享目录到repo指定目录，这里可不重启es

我这里配置的path.repo
path.repo: /home/elasticsearch-7.9.1/repository

mount -t nfs 192.168.113.101:/opt/public /home/elasticsearch-7.9.1/repository

2. 新建存储库

curl -u elastic -H 'Content-type: application/json' -XPUT 'http://192.168.113.101:9200/_snapshot/my_fs_backup' -d '{
 "type": "fs",
 "settings": {
  "location": "my_fs_backup_location"
 }
}'

3. 新建快照（“metrics_38”）

curl -u elastic -H 'Content-type: application/json' -XPUT 'http://192.168.113.101:9200/_snapshot/my_fs_backup/metrics_38?wait_for_completion=true' -d '{
 "indices": "metrics_38"
}'

可以快照所有索引，使用“-”可以剔除指定的索引index1和index2
{
“indices”: “*,-index1,-index2”
}

4. 查看快照状态

curl -u elastic -H ‘Content-type: application/json’ -XGET ‘http://192.168.113.101:9200/_snapshot/my_fs_backup/metrics_38’

5. 后台查看数据

#repo.data: /home/elasticsearch-7.9.1/repository

cd /home/elasticsearch-7.9.1/repository/my_fs_backup_location
du -sh

三、还原到其他ES集群

索引名称不能冲突。

1. 拷贝文件到path.repo目录下

2. 在其他上还原es集群上，新建存储库

curl -H 'Content-type: application/json' -XPUT 'http://127.0.0.1:9200/_snapshot/my_fs_backup' -d '{
 "type": "fs",
 "settings": {
  "location": "my_fs_backup_location"
 }
}'

4. 还原快照，等待green

curl -H 'Content-type: application/json' -XPOST 'http://127.0.0.1:9200/_snapshot/my_fs_backup/metrics_38/_restore' -d '{
 "indices": "metrics_38",
 "rename_pattern": "(.+)"
}'

5. 批量还原

curl -H 'Content-type: application/json' -XPOST 'http://192.168.113.195:9200/_snapshot/my_fs_backup/metrics_38/_restore' -d '{
 "indices": "*",
 "rename_pattern": "(.+)",
  "rename_replacement": "restored-$1"
}'