logstash
牵梦u
开发大型javaEE工程。
展开
-
(三)使用logstash-input-kafka消费信息并根据topic写入不同的es索引
一、logstash-input-kafka介绍 [Logstash 参考指南(Kafka输入插件) 二、举例 分析:利用 decorate_events 参数,将 kafka的元信息(如:topic,group,offset等)全部输出,根据不同的topic即可输出到不同的es索引。 input{ kafka{ bootstrap_servers => ["55.0.10.19:90...原创 2019-10-23 15:43:37 · 4051 阅读 · 0 评论 -
(0)学习 elk 参考的博文,感谢各位大佬的分享
如题,再次感谢大佬们的分享。 分布式集群| Elasticsearch权威指南(中文版) elasticsearch-guide elastic search解决关系型数据库问题 配置高性能Elasticsearch集群 logstash-input-jdbc同步mysql数据到elasticsearch logstash同步父子文档 elasticsearch-jdbc实现MySQL同步到Ela...原创 2019-09-14 09:19:36 · 285 阅读 · 0 评论 -
(二)logstash之插件的简单介绍
一、codec 1、简介 codec plugin 作用于input 和output plugin,负责将数据在原始与logstash event之间切换,常见的 codec如下: plain 读取原始数据 dots 将内容简化为点进行输出 rubydebug 将 logstash event 按照ruby 格式输出,方便调试 line 处理带有换行符的内容 json 处理json 格式的内容 ...原创 2019-09-17 20:51:47 · 285 阅读 · 0 评论