Logstash 插件开发

Logstash

背景

Logstash 是一个用于日志收集、处理、转发的软件,对应 input/filter/output 三个阶段,可以配置多个插件实现流式处理

我们可以自定义开发插件,实现丰富的日志处理功能

参考文档 www.elastic.co/products/lo…

安装 jruby

  1. Download JRuby from jruby.org/
  2. Extract JRuby into a directory.
  3. Add that directory's bin subdirectory to the end of your path.
    PATH=$PATH:/path/to/jruby-version/bin/复制代码
  4. Test it: jruby -v
    jruby 9.1.6.0 (2.3.1) 2016-11-09 0150a76 Java HotSpot(TM) 64-Bit Server VM 25.45-b02 on 1.8.0_45-b14 +jit [linux-x86_64]复制代码

安装 Bundler

  1. 参考文档 bundler.io/
    /path/to/jruby-veriosn/bin/jgem install bundler复制代码
  2. 修改 bundle 下载源
bundle config mirror.https://rubygems.org https://gems.ruby-china.org复制代码

换成国内的下载源后,可以加速依赖安装过程,参考文档 gems.ruby-china.org/

使用 Logstash plugin 脚本生成插件模板

/path/to/logstash-version/bin/logstash-plugin generate --type input --name demo --path /path/to/plugins复制代码

安装 Logstash plugin 需要的依赖

cd /path/to/plugins/logstash-input-demo复制代码

修改 logstash-input-demo.gemspec 文件中 TODO 相关的内容,然后执行安装依赖:

bundle install复制代码

测试插件

bundle exec rspec复制代码

参考文档 [rspec.info/](http://rs…

生成 gem 包

/path/to/jruby-veriosn/bin/gem build {logstash-filter-example}.gemspec复制代码

安装&查看插件

/path/to/logstash-version/bin/logstash-plugin install /path/to/gemfile复制代码
/path/to/logstash-version/bin/logstash-plugin list复制代码

总结

如果你的插件成功安装,那么就可以在 Logstash 的配置文件中引用了

(还有疑问?联系作者微博/微信 @Ceelog)

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
安装Windows Logstash MQTT插件需要以下步骤: 1. 首先,确保已经安装了Java运行时环境(JRE)或开发工具包(JDK)。检查Java安装:打开命令提示符窗口,并运行命令`java -version`,确保显示出Java版本号。 2. 下载Logstash:前往https://www.elastic.co/downloads/logstash,并下载适用于Windows的Logstash压缩包。 3. 解压Logstash压缩包到你喜欢的位置,例如C盘根目录。 4. 在Logstash目录中,创建一个新的文件夹来存放插件。例如,创建一个名为“plugins”的文件夹。 5. 下载MQTT插件:前往https://rubygems.org/gems/logstash-input-mqtt,在网页上找到MQTT插件的地址。 6. 打开命令提示符窗口,进入Logstash目录的bin文件夹中。 7. 运行以下命令来安装MQTT插件: `logstash-plugin install [MQTT插件地址]` 将上面的[MQTT插件地址]替换为你在步骤5中找到的插件地址。 8. 等待插件安装完成。一旦安装完成,你将看到一条消息表明插件已经成功安装。 9. 配置Logstash:在Logstash目录中,创建一个新的配置文件,例如“mqtt.conf”。在该文件中,配置MQTT插件的输入和输出。例如,可以设置MQTT输入以从指定的MQTT代理接收消息,并将消息输出到Elasticsearch或其他目标。 10. 运行Logstash:在命令提示符窗口中,使用以下命令启动Logstash并将配置文件指定为参数: `logstash.bat -f [mqtt.conf的路径]` 将上面的[mqtt.conf的路径]替换为你在步骤9中创建的配置文件的完整路径。 11. 等待Logstash启动并开始处理消息。你可以在Logstash的控制台输出中看到消息的处理情况。 通过按照上述步骤,你可以在Windows上成功安装Logstash的MQTT插件,并开始处理MQTT消息。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值