ElasticSearch的数据迁移

最新推荐文章于 2024-05-05 10:44:55 发布
最新推荐文章于 2024-05-05 10:44:55 发布
阅读量1.1w 收藏 14
点赞数 2
分类专栏： ElasticSearch 文章标签： elasticsearch的数据迁移 elasticsearch的index复制 elasticsearch elasticsearch从一台计算机复制到另一台计算机
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/entomb/article/details/88292030
版权

一、有时候需要将Es里面的部分数据(以index为单位)转移到另一台主机下的es中，为了避免大量重复执行之前读取数据的耗时操作，只需要将对应的ES目录下的nodes目录中的相关数据文件夹拷贝到其他主机下的es中对应的nodes目录中即可
二、使用Kibana工具查看对应的index数据所对应生成的文件夹名字:

本地文件对应为:
 则可以对应拷贝index数据所存在的文件目录，如:books对应文件夹为---》uFdRtQv7Rf22pPC4--EWdg

注:若是有多个分片则需要拷贝对应文件到对应的分片目录下 (查询的时候注意下)

长了脚の妖怪
关注
  • 2
    点赞
  • 踩
  • 14
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 3
    评论
专栏目录
Elasticsearch集群间数据迁移
A_little的博客
10-31 571
一、情况说明 将原来Elasticsearch 6.4.2集群的数据迁移至现在的Elasticsearch 7.2.0集群，迁移数据量大小在200G数据左右。 二、迁移方案 （1）使用elasticdump elasticdump是实现不同ElasticSearch集群之间索引迁移的工具，基于npm包安装。 工具地址：https://github.com/taskrabbit/elast...
elasticsearch节点数据迁移
m0_37611100的博客
08-13 4803
最近笔者的es集群有一个节点的机器有硬件问题，准备置换新机器，所以想把这台机器上的所有es数据都迁移到别的节点上面（一台机器5T左右的数据，生产网段不考虑物理迁移）。 下面讲一下迁移的步骤及方法: 首先我的集群的所有index是没有副本的，所以靠副本来做，是不行的，只能通过es官网提供的https://www.elastic.co/guide/en/elasticsearch/referenc...
elasticsearch snapshot数据备份迁移
dlm_bk的博客
08-01 921
小数据量可以直接使用elasticdump这个工具配合脚本进行备份或者数据迁移。当数据量较大的时候，可以用elasticsearch提供的数据备份迁移策略:snapshot，来备份、迁移数据。 该策略需要配合共享文件系统。将备份快照的文件夹作为共享文件夹，使该文件夹可以被所有的新老集群服务器访问到；在原服务器上面备份数据，在新集群的机器上恢复备份，就可以达到数据迁移的目的，本文档中...
es单机数据迁移到另一个es单机
qq_35377292的博客
04-25 3117
以上就是将一个Elasticsearch单机的数据迁移到另一个Elasticsearch单机的步骤。注意，在进行数据迁移前，需要确保原有和新的Elasticsearch单机的版本一致，否则可能会导致索引不兼容或者其他问题。将备份的数据恢复到新的Elasticsearch单机中，可以使用 Elasticsearch 提供的 restore 功能。3. 在新的Elasticsearch单机中创建一个相同的 snapshot repository，用于存储恢复的数据。## 第二步：恢复备份的数据。
ES集群数据备份与迁移
最新发布
qq_53574266的博客
05-05 2313
言简意赅，本篇文章解决的问题是：当一个es集群中有数据，需要将数据迁移到另外一个es集群，或者是需要将es中的数据备份。 解决问题：repository_verification_exception
Elasticsearch迁移
seapeak007的博客
08-01 503
迁移办法的几个办法:elasticsearch-dumpsnapshotreindexlogstash 公司迁移es,因数据量不是很大,采用的方法elasticsearch-dump的方式进行数据迁移 elasticsearch-dump:主要针对数据量小的情况,而且迁出迁入服务器网络通 elasticsearch-dump 是一款开源的es迁移工具,github地址:https:/...
【笔记】Elasticsearch snapshot（快照）数据迁移
SYN_ACK的博客
02-12 1958
不过需要各位注意的是，ES进行数据迁移时，需要注意版本问题，无论是小版本（例如7.17.x->7.17.x)，还是大版本（7.xx.xx -> 8.xx.xx）都有可能出现问题。到这里，我们的索引就在新的实例上恢复了。本次数据迁移使用的是fs类型的snapshot,ES还提供许多其他类型的快照方式，具体内容可参考官方文档。创建好快照仓库后，创建索引的快照，为了方便演示，在这里指我们只为图2中sharedb_*索引创建快照，如图4。type选项指定了快照仓库的类型，本例中使用的是fs类型，即文件类型。
Elasticsearch ES数据迁移方法及注意事项
m0_67403073的博客
08-16 2730
查询并导出数据拷贝ES物理目录/文件ES快照数据备份和恢复。
Elasticsearch数据迁移（不需要安装其他软件）
qq_42449963的博客
02-25 2658
是需要备份的索引名称。
esm：Elasticsearch迁移工具
02-06
Elasticsearch跨版本数据迁移。 特征： 支持跨版本迁移 覆盖索引名称 复制索引设置和映射 支持http基本认证 支持转储到本地文件的索引 支持从本地文件加载索引 支持http代理 支持切片滚动（elasticsearch 5.0 +） ...
ElasticSearch数据迁移与容灾实践.docx
08-17
ElasticSearch 数据迁移与容灾实践 ElasticSearch（ES）是一款基于 Lucene 打造的分布式搜索引擎，广泛应用于搜索、日志、APM、IOT 等领域。为满足不同数据源与 ES 之间的数据导入导出需求，ES 提供了多种异构数据...
基于Java的Elasticsearch数据同步迁移工具设计源码
04-03
本设计源码提供了一个基于Java的Elasticsearch数据同步迁移工具。...该工具支持不同Elasticsearch版本间的数据迁移同步，包括实时增量同步和全量同步，适合用于学习和实践Java技术，以及开发数据同步相关的系统。
es迁移数据.zip
12-30
在IT行业中，Elasticsearch（简称ES）是一种广泛使用的分布式搜索引擎和实时数据分析..."es迁移数据.zip"这个压缩包提供了一站式的解决方案，简化了这个复杂的过程，使得用户能够更高效地完成Elasticsearch的数据迁移。
es迁移工具
03-09
此工具支持从es导数据出来为txt文件，然后将此txt数据文件导进另外一个es环境里，在es2.3.1环境里测试验证可以正常导出导入，其它版本的要是有问题，下载对应的版本的esjar包就行； 使用方法：下载包，解压，将此...
elasticdump迁移ES数据详解
Rocky balboa
01-07 2445
elasticdump是一个能够将es的数据快速导入、导出、迁移的工具。 下载地址：https://github.com/elasticsearch-dump/elasticsearch-dump 2、将本地数据导入es中 3、将es导入另一个es 4 .其他参数 通过指定，设置每批次同步文档数量。注：通过指定参数，解决long类型字段丢失精度问题。根据条件进行查询 到的数据进行迁移，现在kibana中查询好，然后复制查询语句，将语句进行压缩转义然后执行即可查询语句json要先进行压缩转义https
Elasticsearch：使用Snapshot 进行数据备份迁移 - 实战
Angus
06-17 4534
最近在做Elasticsearch集群的内容，除了集群的规划问题，优化问题。在elasticsearch升级的时候，做数据迁移也是一件头疼的事。自己做遇到了很多的坑，慢慢的填。比方说集群在配置安全认证以后，如何跨集群同步数据。这个问题在另外一篇文章中呈现。 而这篇文章主要是通过Snapshot的方式进行数据的迁移。 以下内容是我做的真实案例，以及我在做的时候遇到的一些问题，以及我自己的一些疑问。 首先说一下，我这个案例做是一台机器上两个节点形成了集群。 # ...
Elasticsearch使用_snapshot进行备份和迁移
爱码士的博客
02-02 615
说明 现在需要将Elasticsearch的数据迁移到新的服务上。 单机使用官方的API完成 集群使用Logstash 备份操作 查看旧版本的索引信息 GET _cat/indices 可以把kibana的索引排除掉。 首先需要配置下路径，我的是在docker中完成的，注意先创建文件夹，权限也要修改 docker exec -it elasticsearch bash mkdir /opt/backup chown elasticsearch:root /opt/backup vi /usr
ElasticSearch 8.x 使用 snapshot（快照）进行数据迁移
qq_19283249的博客
01-29 1747
Elasticsearch 的快照就是指对数据和元数据的定期备份。因为快照中不仅包含了所有数据，也包含了所有的相关信息，比如：映射、配置等；这些快照可以保存在本地文件系统，也可以保存在共享文件系统或者专门存储快照的地方。 在快照的概念中，数据并不都是每次全部备份一遍，而是采用增量的方式进行进行备份。首次备份会进行全力备份，而后续的备份则是在上一次备份后的更新的数据，增量备份可以有效地减少备份所需的存储空间和节省时间。
掌握ElasticSearch（二）：如何将一台电脑上的Elasticsearch服务迁移到另一台电脑上
TracyCoder的博客
01-09 584
Elasticsearch dump是一个用于将Elasticsearch索引数据导出为JSON格式的工具。你可以使用Elasticsearch dump通过命令行或编程接口来导出数据。将源电脑导出的插件放置到目标电脑的es的安装目录的plugins文件夹下。插件存放在安装目录下的plugins文件夹中。一个插件对应一个子文件夹。在目标电脑上安装同版本的Elasticsearch。拷贝原来的elasticsearch.yml配置。
Elasticsearch数据迁移的详细步骤
05-31
Elasticsearch是一个分布式的搜索引擎，数据量大、复杂度高，因此在数据迁移时需要认真考虑和规划，以确保数据的完整性和安全性。以下是Elasticsearch数据迁移的详细步骤： 1. 确定目标集群：首先需要确定数据要迁移到哪个目标集群中，可以是本地集群或远程集群。 2. 备份源集群数据：在数据迁移前，需要备份源集群中的数据，以确保在发生意外情况时能够恢复数据。可以使用Elasticsearch提供的快照和恢复功能进行备份。 3. 创建目标集群：如果要将数据迁移到新的目标集群中，需要先创建新的集群。可以使用Elasticsearch提供的API或命令行工具创建新的集群。 4. 安装插件：如果目标集群需要使用和源集群不同的插件，需要在目标集群中安装相应的插件。 5. 配置目标集群：在目标集群中，需要配置和源集群相同的索引、映射、分片和副本等参数，以确保数据能够正确迁移。 6. 迁移数据：可以使用Elasticsearch提供的API或命令行工具将源集群中的数据迁移到目标集群中。在迁移数据时，需要注意数据的完整性和安全性。 7. 验证数据迁移：在数据迁移完成后，需要对目标集群中的数据进行验证，确保数据迁移成功并且数据完整。可以使用Elasticsearch提供的API或命令行工具进行验证。 8. 修改应用程序配置：如果应用程序需要访问迁移后的数据，需要修改应用程序的配置，以确保应用程序能够正确访问目标集群中的数据。 9. 清理源集群：在数据迁移完成并验证后，可以清理源集群中的数据，以释放资源和空间。 总之，Elasticsearch数据迁移需要认真规划和操作，确保数据的完整性和安全性。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

长了脚の妖怪

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值