![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据库运维-ElasticSearch-LK
ELK相关的技术案例分享
戒掉贪嗔痴(薛双奇)
10年以上DBA从业经验,Oracle ACE,中国DBA联盟成员,青学会专家顾问,Oracle,MySQL,PostgreSQL DBA,大数据运维工程师。
熟悉20种数据库的运维及管理:横跨关系数据库,NoSQL数据库,搜索引擎,大数据等。
获得IT类认证十几张。
擅长数据库系统架构涉及,容量规划,灾备系统建设,故障诊断及性能优化。
展开
-
【filebeat】配置抽取nginx数据到 kafka
4.配置filebeat抽取nginx的数据到logstash;3.配置nginx-to-kafka。直接使用kafka自带的zk集群。2.zookeeper安装。1.kafka环境准备。5.nginx写入数据。6.kafka查看数据。原创 2024-07-01 11:26:55 · 139 阅读 · 0 评论 -
【fillebeat】filebeat采集nginx-to-redis,logstash推送redis数据到elasticsearch集群
如果redis没有设置密码,则配置logstash时,注释掉:password 关键字。4.配置filebeat抽取nginx数据到redis。5.启动filebeat。2.nginx参数配置。--检查生成的ES索引。6.登陆redis;--默认读取多管道。原创 2024-06-30 16:10:39 · 185 阅读 · 0 评论 -
【filebeat】filebeat采集tomcat的数据发送到logstash,logstash发送到ES数据库集群
2.配置filebeat 采集tomcat到Logstash。4.logstash端口查看:9600。5.启动 filebeat。1.安装filebeat。6.向tomcat写入数据。3.tomcat日志格式。原创 2024-06-30 13:05:45 · 151 阅读 · 0 评论 -
【tomcat】对tomcat进行高并发测试
1.向tomcat写入数据。2.观察ES数据库的变化。原创 2024-06-30 11:36:56 · 114 阅读 · 0 评论 -
【logstash】安装Logstash-module java.base does not “opens java.security“ to unnamed module @4920430f
4.配置logstash 读取tomcat的日志数据。1.下载并安装logstash。2.logstash 配置文件。6.Logstash启动报错。7.成功启动Logstash。5.启动logstash。8.ES 收集的日志检查。原创 2024-06-30 11:19:06 · 178 阅读 · 0 评论 -
【elasticsearch】tomcat使用
4.tomcat 版本查看。1.安装tomcat。2.修改日志的输出格式。--启动tomcat;--访问tomcat;5.关闭tomcat。原创 2024-06-30 10:44:57 · 158 阅读 · 0 评论 -
【elasticsearch】license管理
2.设置license为start_trial,即试用版本的30天。3.设置为基本的license:basic;1.license管理。原创 2024-06-29 18:03:31 · 108 阅读 · 0 评论 -
【kibana】kibana加密访问ES
1. 创建kibana的 keystore。3.启动kibana。原创 2024-06-29 17:53:47 · 209 阅读 · 0 评论 -
【elasticsearch】X-PACK 认证
5.配置通信证书(每个节点)2.为认证节点颁发证书。6.重启所有的ES节点。--创建CA认证私钥。--4.拷贝其他节点。原创 2024-06-29 17:22:45 · 141 阅读 · 0 评论 -
【elasticsearch】curl 命令常用维护ES的命令
1.curl的常用命令。原创 2024-06-29 15:58:05 · 81 阅读 · 0 评论 -
【kibana】kibana访问ES常用命令
2.使用Kibana 访问ES。原创 2024-06-29 15:57:06 · 127 阅读 · 0 评论 -
【elasticsearch】IK分词器的使用
4.没有下载到相关的分词器版本,无法启动ES;1.安装 IK分词器。原创 2024-06-29 15:55:59 · 96 阅读 · 0 评论 -
【elasticsearch】kibana-ES 批量操作
6.指定索引批量创建。原创 2024-06-29 10:27:21 · 160 阅读 · 0 评论 -
【elasticsearch】kibana-ES的布尔运算
4.满足部分条件,同时不满足某些条件=xx, 同时<>YY;1.布尔运算之 AND 的使用。8.term查询,精确匹配查询。5.按照日期范围查询。10.自定义高亮显示。原创 2024-06-28 20:17:25 · 149 阅读 · 0 评论 -
【elasticsearch】PUT 指定ID的方式批量插入数据
3.按照一个字段顺序排序。8.全文搜索取前两行。5.筛选指定字段排序。原创 2024-06-28 20:13:15 · 174 阅读 · 0 评论 -
【kibana】es的数据库查询
3.插入指定的行_id,并更新指定_id的文档。5.查看数据库元数据信息。原创 2024-06-28 20:10:26 · 216 阅读 · 0 评论 -
【kibana】
2.POST创建文档。原创 2024-06-28 20:08:29 · 105 阅读 · 0 评论 -
【kibana】kibana-es数据库管理
3.设置数据库的读写模式。1.设置数据库副本数。原创 2024-06-28 20:04:08 · 80 阅读 · 0 评论 -
【kibana】kibana管理ES之-删除操作
可以删除数据库,可以按照指定的条件删除文档,可以删除定义的索引模版。1.删除索引(数据库)原创 2024-06-28 11:49:03 · 328 阅读 · 0 评论 -
【kibana】kibana-文档管理
1.指定字段类型创建数据库。3.添加和删除字段(DDL)2.按照文档编号插入数据。原创 2024-06-28 11:09:29 · 110 阅读 · 0 评论 -
【kibana】可视化简单使用
4.使用Kibana查看索引信息。2.配置kibana启动文件。3.启动kibana。可以看到我们创建的索引。我们自定义的索引模版。自定义索引的生命周期。原创 2024-06-28 10:01:20 · 121 阅读 · 0 评论 -
【kibana】使用kibana-控制台-索引-分片-映射的管理
【代码】【kibana】使用kibana-控制台-索引-分片-映射的管理。原创 2024-06-28 10:30:50 · 133 阅读 · 0 评论 -
【elasticsearch】ES升级:7.9.1-to-7.9.2
ES升级后再重启一次。否则可能版本信息没有变更。3.新的文件拷贝到旧的目录。原创 2024-06-28 09:28:24 · 120 阅读 · 0 评论 -
【elasticsearch】管理节点缩容
管理节点、协调节点的加入,对于集群没有太大的影响,不会发生数据重分布。2.关闭管理节点Node6;3.检查集群健康状态。原创 2024-06-28 09:25:08 · 118 阅读 · 0 评论 -
【elasticsearch】管理节点扩容
6.依次重启node1/2/3/1.app应用程序包准备。2.修改ES启动配置文件。原创 2024-06-28 09:23:09 · 119 阅读 · 0 评论 -
【elasticsearch】协调节点缩容
协调节点的加入和删除不影响集群的健康状态。可以随时删除和添加协调节点。2.关闭协调者:node4;因为协调节点没有具体数据。原创 2024-06-28 09:20:43 · 122 阅读 · 0 评论 -
【elasticsearch】数据节点缩容
6.检查集群健康状态。原创 2024-06-28 09:18:02 · 208 阅读 · 0 评论 -
【elasticsearch】开发工具ElasticHD
ElasticHD:http://192.168.1.7:9201 点击Connect;输入需要查询的索引名称:xsq3,点击查询。原创 2024-06-28 09:14:46 · 129 阅读 · 0 评论 -
【elasticsearch】数据节点扩容
es默认启动后,自动开启自动数据平衡功能。我原本打算,扩容后开启自动平衡。没想到重启集群后数据自动平衡了。少了步骤数据平衡到新加的数据节点。1.app应用程序包准备。2.修改ES启动配置文件。原创 2024-06-27 15:56:07 · 113 阅读 · 0 评论 -
【elasticsearch】协调节点扩容
1.app应用程序包准备。2.修改ES启动配置文件。原创 2024-06-27 15:11:31 · 64 阅读 · 0 评论 -
【elasticsearch】给指定的模版设置分片
(1)可以通过all_index_shards 模版设置全库所有的索引的分片规则。(2)可以通过_template 指定匹配名称规则索引遵循分片规则。(3)指定具体的索引遵循指定的分片规则。4.给指定的索引指定分片和副本数。2.给指定的模版设置分片。原创 2024-06-27 14:08:42 · 149 阅读 · 0 评论 -
【elasticsearch】“IP:PORT/_cat/nodes?v“ 结果如何分析
【代码】【elasticsearch】“IP:PORT/_cat/nodes?v“ 结果如何分析。原创 2024-06-27 12:58:05 · 105 阅读 · 0 评论 -
【elasticsearch】ES的其他常见的查询项目
(7)推送文档到指定数据库的指定文档ID;5.将数据推送到指定数据库,指定文档编号。(5)单个数据库的分片和副本情况查看。2.查看单个索引的分片和副本数。(6)所有数据库的分片和副本查看。7.es集群节点主备情况查询。(4)单个数据库的分片情况。(3)所有的数据库的查看。4.查看单个数据库的分片。3.查看整个集群副本。(1)查看集群健康状态。原创 2024-06-27 12:27:44 · 187 阅读 · 0 评论 -
【elasticsearch】设置副本时“template“: “*“ 和 “index_patterns“: “*“ 的区别
【代码】【elasticsearch】设置副本时“template“: “*“ 和 “index_patterns“: “*“ 的区别。原创 2024-06-27 11:59:53 · 67 阅读 · 0 评论 -
【elasticsearch】分片和副本的设置
【代码】【elasticsearch】分片和副本的设置。原创 2024-06-27 11:49:14 · 142 阅读 · 0 评论 -
【elasticsearch】故障转移测试
由此可见,三个节点以上的集群,单个节点宕机,不影响集群。老的节点启动后,会重新自动加入集群,并同步丢失的数据。4.两个节点的情况下插入数据测试。原创 2024-06-27 11:32:19 · 102 阅读 · 0 评论 -
【elasticsearch】ES7.9.1 分布式集群模拟
3.JDK环境变量配置。8.查看集群的监控状态。4.JVM 内存配置。原创 2024-06-27 11:19:47 · 128 阅读 · 0 评论 -
【elasticsearch】分布式集群路由机制
2.集群中的索引是符合创建的?4.集群中 如何搜索文档?3.集群中如何存放文档?1.集群是如何组成的。原创 2024-06-27 10:40:58 · 103 阅读 · 0 评论 -
【elasticsearch】二次评分
3.二次评分查询的结构。4.二次评分参数配置。原创 2024-06-26 15:33:46 · 78 阅读 · 0 评论 -
【elasticsearch】查询改写
3.rewrite 的可选配置参数;原创 2024-06-26 14:33:23 · 88 阅读 · 0 评论