elasticsearch-03.从elasticsearch中将数据导出到json文件中

logstash的安装可参考上一篇博客
最近公司在处理大数据方面做技术选型工作,目前进入视野范围的有elasticsearch,crate,druid.io
本文将讲述如何将elasticsearch中的数据导出到json文件。
首先,看配置信息:

input{
     elasticsearch {
        hosts => ["10.0.0.101:9200","10.0.0.102:9200","10.0.0.103:9200"]
		index => "weblogs"
		type => "weblog"
		size => 1000
	    scroll => "5m"
		docinfo => false
    } 
} 
output{
   file {
     path => "weblogs-data.json"
   }
   # stdout {
   #    codec => json_lines
   # }
 } 

将上述配置存储为conf文件,如【es-json.conf】,进入logstash的bin目录下,执行:
./logstash -f es-json.conf
等待导出完成即可。

导出完成后,可将导出完成的json文件导入到crate中。

crate admin面板中执行以下sql即可将json文件中的数据导入到crat

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值