Elasticsearch备份和恢复

创建仓库

集群可以使用hdfs的方式，单机可以直接备份到本地。

集群的hdfs方式，需要先安装hdfs，可以docker安装个单机版本的hdfs。

（可以直接创建容器：docker run -p 22022:22 -p 8020:8020 -p 50010:50010 -p 50020:50020 -p 50070:50070 -p 50075:50075 --name hdfs -d pravega/hdfs）

单机方式可能需要在配置文件指定reop.path配置。

PUT http://ip:9200/_snapshot/my_backup
{
    "type": "hdfs", 
    "settings": {
        "uri": "hdfs://ip:8020" ,
        "path": "/es_backup"
    }
}

elasticsearch 版本是7.4.2，这里需要安装个hdfs的插件

wget https://artifacts.elastic.co/downloads/elasticsearch-plugins/repository-hdfs/repository-hdfs-7.4.2.zip
传到es的容器里面
./elasticsearch-plugin install file:///repository-hdfs-7.4.2.zip
然后重启es容器即可

创建和查看快照

PUT http://ip:9200/_snapshot/my_backup/snapshot_1?wait_for_completion=true
GET http://ip:9200/_snapshot/my_backup/snapshot_1
其他操作参考 https://www.elastic.co/guide/cn/elasticsearch/guide/current/backing-up-your-cluster.html

从快照中恢复

恢复所有索引
POST http://ip:9200/_snapshot/my_backup/snapshot_1/_restore?wait_for_completion=true

恢复指定索引
POST http://ip:9200/_snapshot/my_backup/snapshot_1/_restore?wait_for_completion=true
{
    "indices": "all_record"
}

 定时备份和恢复

在hdfs创建仓库
进入hdfs，创建仓库路径 hdfs dfs -mkdir /es_schedule_backup_repo

创建定时备份的仓库
PUT http://ip:9200/_snapshot/es_schedule_backup_repo
{
    "type": "hdfs", 
    "settings": {
        "uri": "hdfs://ip:8020" ,
        "path": "/es_schedule_backup_repo"
    }
}

  如果有这个报错 Permission denied: user=elasticsearch, access=WRITE，执行
  hdfs dfs -chmod 777 /

创建SLM策略
PUT http://ip:9200/_slm/policy/es_schedule_backup_policy // PUT 改为GET就是查看
{
    "schedule": "0 0 1,13 * * ?", // 每日1点和13点 各执行一次
    "name": "<es_schedule_backup-snap-{now+8h{yyyy.MM.dd.HH.mm.ss}}>", // 时区不对，加8小时，看实际情况，也可以不加
    "repository": "es_schedule_backup_repo",
    "config": {
        "indices": [
            "*"
        ]
    },
    "retention": {
        "expire_after": "3d",
        "min_count": 3,
        "max_count": 6
    }
}

查看仓库的snapshot
GET http://ip:9200/_snapshot/es_schedule_backup_repo/_all

恢复
根据查看仓库的snapshot，挑选一个snapshot，替换到下面的index_name，即可恢复
http://ip:9200/_snapshot/es_schedule_backup_repo/index_name/_restore?wait_for_completion=true