hongchenshijie的博客

logstash grok 规则

文章目录1. 认证问题2. 证书问题3. Elasticsearch 拒绝连接最后一开始使用presto 连接elasticsearch时，发现无法进行用户名和密码进行身份的认证，在网上找了好久才知道prestosql 更名为 trino 了。最后通过安装trino 可以设置用户名和密码成功。不过在设置过程中又出现了一系列的问题，通过去github、stackoverflow、trino社区进行提问，经过网友的回答，终于解决了这个问题，在这里记录一下。1. 认证问题2021-07-21T10:28

文章目录1. 使用keytool来为集群的每台机器生成密钥和证书。1. 先执行下面的脚本2. 参数解释2. 配置kafka3. 遇到的问题4. 配置logstash输出到kafka的output1. 使用keytool来为集群的每台机器生成密钥和证书。1. 先执行下面的脚本会要输入很多次密码建议密码都一样#!/bin/bash#Step 1#以下注意修改时间 默认时间365keytool -keystore server.keystore.jks -alias localhost -va

文章目录1. pom(1). 依赖(2). 仓库2. 问题一(1). 异常详情(2). 解决方法(3). 代码示例3. 问题二(1). 异常详情(2). 解决方法(3). 代码示例1. pom(1). 依赖 <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-core --> <dependency> <groupId>org.apache

报错详情今天在到导入数据到ES时,进入discover查询时,遇到"undefined" is not a configured index pattern ID 这个错误去网上找了半天也不知道问题在哪,后来才知道是因为Mapping映射问题,日期字段没有指定格式。在ES中日期格式的数据创建索引时需要指定格式,ES对日期要求比较严格。解决办法删除索引重新创建, 创建时使用mapping指定日期字段的格式。mapping 映射示例PUT /_索引{ "mappings": {

文章目录1、rename2、update3、replace4、convert5、gsub6、uppercase/lowercase7、split8、strip9、remove_field10、join11、mergemutate插件可以对事件中的数据进行修改，包括rename、update、replace、convert、split、gsub、uppercase、lowercase、strip、remove_field、join、merge等功能。1、rename对于已经存在的字段，重命名其字段

netstat -tunlp | grep 5601# 8782 就是进程号kill -9 8782

前言博主使用的elk 版本为7.8.1,后续安装和使用的也是logstash 7.8.1文章目录前言一、下载上传二、解压三、创建conf 脚本四、启动logstash五、logstsh 插件1. input2. File3. 从ElasticSerach中读取数据一、下载上传下载地址:https://elasticsearch.cn/download/博主上传在/export/soft安装在 /export/install程序目录 /export/servers二、解压#进入解压

文章目录1. 查看节点状态2. 查看索引3. 查看节点列表4. 增加索引5. 删除索引6. 新增document7. 搜索 type 全部数据8. 查找指定 id 的 document 数据9. 修改 documentA. 整体替换B. 只修改某个字段10. 删除一个 document11. 按条件查询(全部)12. 按照字段的分词查询13. 按照分词子属性查询14. 按照短语查询15. 模糊查询16. 查询后过滤17. 查询前过滤(推荐使用)18. 按范围过滤19. 排序20. 分页查询21. 指

文章目录1.下载准备2.下载后上传解压包到linux上a. 准备安装的文件夹b. 上传jar到/export/softc. 解压3. 修改配置文件1.下载准备去elk的中文社区下载历史版本主使用的是linux CentOS7 系统 + elasticsearch 7.8.1 + kibana 7.8.1下载地址如下,找到跟es对应的版本:https://elasticsearch.cn/download/2.下载后上传解压包到linux上a. 准备安装的文件夹# 上传jar包的文件夹

文章目录1.下载准备2.下载后上传解压包到linux上a. 准备安装的文件夹b. 上传jar到/export/softc. 解压修改配置文件3. 试着启动会发现报错4. 创建新用户5. 重新启动6. 查看web 页面,看是否启动成功1.下载准备可以去elk的中文社区下载历史版本博主使用的是linux CentOS7 系统 + elasticsearch 7.8.1准备:配置好静态网络关闭了防火墙和selinux安装好了JDK1.8下载地址如下:https://elasticsear