kibana数据导入导出_怎么实现kibana的数据导入导出

匿名用户

1级

2016-10-19 回答

logstash好说,client只需要在代码逻辑改下redis地址就可以了,logstash server直接docker pull镜像就可以了。

elasticsearch需要我们自己写脚本迁移,因为跨机房导入导出,挺费工夫的,关于elasticsearch的迁移,我下篇再写,今天主要写kibana的迁移。

kibana配置的迁移,他的配置是在elasticsearch里面,下图就是elasticsearch里kibana的配置信息。

业务和日志的elasticsearch都是一个集群,业务的数据肯定是迁移过去的,至于日志就算了…. 我们这的日志,每个月有几十T,这对于迁移来说,很是繁重… 索性直接干掉…..

这里重点说下怎么把kibana4的配置导出并迁移。 如果你不偷懒,可以自己用pyhton写个elasticsearch的导出程序,实现起来很简单….. 如果你跟我一样很偷懒,那么就直接用现成的工具。 elasticdump是个node.js开发的一个小而精的elasticsearch导出程序。

Python

apt-get update

apt-get install node.js

curl -L https://npmjs.org/install.sh | sh

ln -s /usr/bin/nodejs /bin/node

npm insall elasticdump -g

导出,也可以用来做elasticsearch的备份,elasticdump可以选择性的导出data和mapping。

Python

具体配置信息

elasticdump --ignore-errors=true --scrollTime=120m --bulk=true --input=http://xxxxx:9200/.kibana --output=data.json --type=data

导出mapping信息

elasticdump --ignore-errors=true --scrollTime=120m --bulk=true --input=http://xxxxxx/.kibana --output=mapping.json --type=mapping

咱们再把刚才备份的数据,导入到目标elasticsearch上。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值