logstash推送信息到kafka

这篇博客介绍了如何配置和使用logstash将数据从标准输入或数据库推送到kafka。首先,需要安装logstash和kafka输入插件。然后,通过配置logstash的input和output部分,设置stdin输入和kafka输出。测试阶段,可以通过命令行交互验证logstash的功能。此外,还展示了如何从数据库获取数据,并详细说明了配置文件中的参数含义。
摘要由CSDN通过智能技术生成

介绍

详细内容参考:https://www.elastic.co/cn/products/logstash

安装

依赖:jdk8及以上版本 Logstash版本:6.4.1 步骤:

  1. 官网下载tar.gz包

链接地址:链接 logstash-6.4.1.tar.gz 2. 解压logstash 解压目录为/usr/local/logstash-6.4.1

tar zxvf logstash-6.4.1.tar.gz

3.安装kafka input插件,顺便把output也安装了 进入目录/usr/local/logstash-6.4.1

bin/logstash-plugin install logstash-output-kafka
bin/logstash-plugin install logstash-input-kafka

测试

基本测试 ./logstash -e 'input {stdin {}} output {stdout {}}' 输入什么内容,输出什么内容在命令窗口。

1、配置logstash文件,可以在任何目录,本文我指定目录为/usr/local/logstash-6.4.1/config input {   stdin { } //命令窗口输入内容 }

output { k

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值