logstash Codec

最新推荐文章于 2021-08-11 18:46:43 发布

scan724

最新推荐文章于 2021-08-11 18:46:43 发布

阅读量1.3k

点赞数

分类专栏： Logstash

本文链接：https://blog.csdn.net/zhaoyangjian724/article/details/52291486

版权

Logstash 专栏收录该内容

97 篇文章 32 订阅 ¥39.90 ¥99.00

订阅专栏

Logstash通过FileWatch Ruby Gem库监控文件变动，利用.sincedb文件跟踪读取位置，确保数据完整性。它采用input|decode|filter|encode|output的数据流模式，Codec负责事件的解码和编码。在‘Hello World’示例中，rubydebugCodec用于调试。通常，Codec在stdout插件配置中用于测试和调试。

摘要由CSDN通过智能技术生成

Logstash 使用一个名叫FileWatch的Ruby Gem库来监听文件变化,这个库支持glob扩展文件路径,

而且会记录一个叫.sincedb的数据库文件来跟踪被监听日志文件的当前读取位置,所以,不要担心Logstash会漏掉你的数据。



使用Redis 或者其他的消息队列系统来作为Logstash Broker的角色

编解码 配置:

Codec 来自Coder/decoder 两个单词首字母缩写)


Logstash 不只是一个input|filter|output的数据流,而是一个input|decode|filter|encode|output 的数据流

Codec 就是用来decode,encode 事件的。



事实上,我们在第一个"Hello World" 用例中就已经用过Codec了---rubydebug 就是一种Codec!


虽然 它一般只会在stdout插件中,作为配置测试或者调试的工具。