logstash
小努蛋
我是一个很很很很菜的鸟
展开
-
关于logstash-out-mongodb插件说明
从kafka获取数据,存到mongodb中。适合空间查询geo_point设置。配置文件如下: input { kafka { type => "test" auto_offset_reset => "smallest" group_id => "m2" topic_id => "db100" zk_connect => "192.168.原创 2016-09-13 17:17:35 · 3189 阅读 · 0 评论 -
logstash-out-elasticsearch 设置geo_point格式
此项目是logstash从kafka拉取数据,并取到elastisearch.并进行格式处理。保存geo_point类型,可以进行空间数据查询 配置文件如下: es.conf input { kafka { type => "test" auto_offset_reset => "smallest" group_id => "mon9"原创 2016-09-22 17:24:14 · 3895 阅读 · 0 评论 -
logstash-out-hdfs
logstash从kafka拉取数据,并插入到hdfs中 配置文件如下: input { kafka { type => "test" auto_offset_reset => "smallest" group_id => "mon2" topic_id => "db100" zk_connect => "192.168.199.6:21原创 2016-09-22 17:42:02 · 2990 阅读 · 0 评论 -
logstash-input-exec插件使用
注意:此实例只能通过FTP对文件读取,不是文件夹。愿大神们分享下如何读取文件夹 input { exec {codec => plain { } command => "curl ftp://192.168.0.4/logs/test.txt" interval => 3000} } output {原创 2017-01-06 14:26:46 · 2681 阅读 · 0 评论