![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
logstash
Jenrey
这个作者很懒,什么都没留下…
展开
-
linxu安装filebeat及配置输出到logstash
配置在:/etc/filebeat/filebeat.yml原创 2020-11-17 17:52:13 · 401 阅读 · 0 评论 -
logstash-keystore对配置文件的加密
针对于logstash的conf文件做加密(主要解决mysql等连接信息明文不安全的问题)可以采用logstash-keystore做处理。创建keystorebin/logstash-keystore create创建你要加密的变量key例如这里添加cosmosDB的连接变量 COSMOS_ACCOUNT_KEYbin/logstash-keystore add COSMOS_ACCOUNT_KEY然后输入要变量背后对应的值即可列出在keystore中定义的key原创 2020-08-17 12:04:30 · 1848 阅读 · 0 评论 -
Logstash详解之——input模块
input组件是Logstash的眼睛和鼻子,负责收集数据的,那么们就不得不思考两个问题,第一个问题要清楚的就是,元数据在哪,当然,这就包含了元数据是什么类型,属于什么业务;第二个问题要清楚怎么去拿到元数据。只要搞明白了这两个问题,那么Logstash的input组件就算是弄明白了。对于第一个问题,元数据的类型有很多,比如说你的元数据可以是日志、报表、可以是数据库的内容等等。元数据是什么样子的我们不需要关心,我们要关系的是元数据是什么类型的,只要你知道元数据是什么类型的,你才能给他分类,或者说给他一个ty原创 2020-08-12 23:35:27 · 2094 阅读 · 0 评论 -
logstash简介及架构(一篇精通直接上手)
1、logstash介绍数据收集处理引擎 ETL工具2、logstash架构简介Logstash Event是一个java object,它对外暴露了获取内部字段以及修改内部字段值的一些api。下面举例讲解:stdin:标准输入codec是line,这个codec的作用就是按照每一行切割数据,就是说把每一行都转换成logstash eventstdout:标准输出codec是json,这个codec的作用就是把每一个logstash event转换原创 2020-07-04 12:56:31 · 7195 阅读 · 0 评论 -
linux安装logstash并采集日志到cosmosDB中,filebeat写入logstash
1、下载logstash我们选择下载tar.gz文件点我下载logstash-7.8.0下载完解压:(解压路径随意,解压到那里就在那里启动logstash,我们这里选择/opt)tar -zxvflogstash-7.8.0.tar.gz注意:因为logstash是需要依赖JAVA_HOME环境变量的,所以我们需要安装java安装前请自行查看java是否已经存在:java -version2、下载java点我下载java8创建目录,在/usr/目录下创建java目录,..原创 2020-07-02 15:34:52 · 608 阅读 · 0 评论