搜集日志。

The Straggling Crow

已于 2024-07-23 15:29:57 修改

阅读量236

点赞数 1

分类专栏：系统文章标签： elasticsearch

于 2024-07-15 11:12:47 首次发布

本文链接：https://blog.csdn.net/qq_41834780/article/details/140429653

版权

系统专栏收录该内容

6 篇文章 0 订阅

订阅专栏

部署案例

在这里插入图片描述

logstash

在这里插入图片描述
9600-9700 表示 Logstash API 服务将尝试在 9600 到 9700 这个范围内的端口上监听 HTTP 请求。

在这里插入图片描述

开机自动运行logstash

在这里插入图片描述

收集节点日志

work节点是以daemonSet 的方式运行 filebeat。这里使用的是containerd
在这里插入图片描述

kibana界面，进入stack manager — 索引管理 —

索引模式创建索引，创建k8s-* 选择时间戳 @timestamp 。然后Discover 找k8s相关的日志

收集节点应用程序日志

在这里插入图片描述
同一台机器可以有多个logstash，端口不同，用于收集不同的日志

6.2

在这里插入图片描述

k8s-worker1是 nginx所在的节点

在这里插入图片描述

在kibana中的索引管理里也有了

收集pod 日志

一个pod中能运行多个容器，filebeat 以 sidecar的容器实现
在这里插入图片描述

在这里插入图片描述

接下来到 kibana就都一样了。

EFK

在这里插入图片描述
EFK由于其轻量级，所以可以直接部署在 k8s 集群之内的。ELK就部署在物理机上。
Fluentd 不需要logstash，自己就能完成数据格式化，方便后面处理

部署EFK

获取 EFK 部署清单文件

在master节点操作，切换git 分支是因为要和 kubectl version 同版本
在这里插入图片描述

例子es的statfulset用的存储用的emptydir，映射到宿主机的/data。生产环境不能这样用
在 Kubernetes 中，Endpoint 是一种 API 资源，它用于表示一个或多个 IP 地址和端口组合，这些组合是某个 Service 的实际后端。Endpoint 资源会动态更新，以反映集群中服务的可用 Pods。
在这里插入图片描述
因为是nodePort类型，所以host 可以是集群中任意节点 ip

service名称或者nodePort，还有就是endpoint 来访问 es.
上面采取的是service名称的方式，svc + namespace + svc.cluster.local.

at的是dns。如果返回中有下面的，就证明成功
在这里插入图片描述
划线的ip就是 kubectl get svc -n kube-system里的 ip