logstash-filter-jdbc_streaming通过mysql中的表进行数据“丰富化”

应用场景:
通过logstash-filter-jdbc_streaming插件,动态“丰富化” logstash处理的数据。

filter{
	jdbc_streaming {
	      jdbc_driver_library => "/usr/local/logstash-6.8.0/vendor/jar/jdbc/mysql-connector-java-8.0.15.jar"
	      jdbc_driver_class => "com.mysql.cj.jdbc.Driver"
	      jdbc_connection_string => "jdbc:mysql://xxx.xxx.xxx.xxx:3306/edr_end?characterEncoding=utf8&useSSL=false"
	      jdbc_user => "root"
	      jdbc_password => "yourPassword"
	      jdbc_validate_connection => true
	      parameters => { "search_param" => "[hostId]"}
	      statement => "select * from t_asset_preserve where host_id = :search_param"
	      target => lookupResult
	    }
	    if ("_jdbcstreamingdefaultsused" not in [tags]) and ("_jdbcstreamingfailure" not in [tags]) {
	      mutate {
	        add_field => {"assetName" => "%{[lookupResult][0][asset_name]}"}
	        add_field => {"assetIp" => "%{[lookupResult][0][ip]}"}
	      }
	    }
	  
	  }
}

Mysql返回的结果集lookupResult,可用于流式动态 “丰富化” 数据。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值