我整理的一些关于【be】的项目学习资料（附讲解～～）和大家一起分享、学习一下：

 https://d.51cto.com/f2PFnN

Kubernetes EFK 架构实现指南

在现代软件开发中，日志管理是一个不可或缺的部分。在 Kubernetes 环境中，EFK（Elasticsearch、Fluentd、Kibana）架构广泛用于日志收集、存储与可视化。本文将指导刚入行的小白如何实现 EFK 架构，我们将通过一个清晰的流程图和步骤表格来帮助你理解。

EFK 实现流程

以下是实现 EFK 架构的主要步骤：

步骤描述
1调整 Kubernetes 集群设置，确保集群正常运行。
2部署 Elasticsearch，作为日志存储后端。
3部署 Fluentd，将日志从 Kubernetes 中收集并发送到 Elasticsearch。
4部署 Kibana，进行日志可视化。
5验证架构功能，确保各部分正常工作。
步骤详解
1. 调整 Kubernetes 集群设置

首先，要确保你的 Kubernetes 集群已经运行，可以通过下面的命令检查集群状态：

kubectl cluster-info  # 查看集群信息
  • 1.

如果集群未运行，可以参考 Kubernetes 官方文档进行设置。

2. 部署 Elasticsearch

Elasticsearch 是用于存储和搜索日志的数据库。下面是部署 Elasticsearch 的 YAML 文件示例：

apiVersion: apps/v1
kind: Deployment
metadata:
  name: elasticsearch
spec:
  replicas: 1
  selector:
    matchLabels:
      app: elasticsearch
  template:
    metadata:
      labels:
        app: elasticsearch
    spec:
      containers:
      - name: elasticsearch
        image: elasticsearch:7.10.0  # Elasticsearch 镜像
        ports:
        - containerPort: 9200  # Elasticsearch 默认端口
        env:
        - name: discovery.type
          value: single-node  # 单节点模式
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.

使用以下命令创建 Elasticsearch 部署：

kubectl apply -f elasticsearch-deployment.yaml  # 创建 Elasticsearch 部署
  • 1.
3. 部署 Fluentd

Fluentd 用于收集和转发日志。以下是 Fluentd 的配置文件：

apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: fluentd
spec:
  selector:
    matchLabels:
      app: fluentd
  template:
    metadata:
      labels:
        app: fluentd
    spec:
      containers:
      - name: fluentd
        image: fluent/fluentd:v1.12.0  # Fluentd 镜像
        env:
        - name: FLUENT_ELASTICSEARCH_HOST
          value: "elasticsearch"  # Elasticsearch 地址
        - name: FLUENT_ELASTICSEARCH_PORT
          value: "9200"  # Elasticsearch 端口
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.

使用以下命令创建 Fluentd 部署：

kubectl apply -f fluentd-daemonset.yaml  # 创建 Fluentd DaemonSet
  • 1.
4. 部署 Kibana

Kibana 提供了一个友好的用户界面来查看和分析日志。下面是 Kibana 的部署文件：

apiVersion: apps/v1
kind: Deployment
metadata:
  name: kibana
spec:
  replicas: 1
  selector:
    matchLabels:
      app: kibana
  template:
    metadata:
      labels:
        app: kibana
    spec:
      containers:
      - name: kibana
        image: kibana:7.10.0  # Kibana 镜像
        ports:
        - containerPort: 5601  # Kibana 默认端口
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.

使用以下命令创建 Kibana 部署：

kubectl apply -f kibana-deployment.yaml  # 创建 Kibana 部署
  • 1.
5. 验证架构功能

此时，所有的服务都已部署，你可以通过以下命令查看各个服务的状态：

kubectl get pods  # 查看所有 Pod 的状态
  • 1.

确保 Elasticsearch、Fluentd 和 Kibana 状态正常。可以通过访问 http://<kibana-ip>:5601 来访问 Kibana。

Gantt 图展示步骤
EFK 实现流程 2023-10-01 2023-10-01 2023-10-02 2023-10-02 2023-10-03 2023-10-03 2023-10-04 2023-10-04 2023-10-05 2023-10-05 2023-10-06 调整 Kubernetes 集群调整 部署 Elasticsearch 部署 Fluentd 部署 Kibana 验证架构功能 部署 EFK 实现流程
流程图展示
调整 Kubernetes 集群设置 部署 Elasticsearch 部署 Fluentd 部署 Kibana 验证架构功能
结尾

通过以上步骤，你应该能够在 Kubernetes 中顺利实现 EFK 架构。这一架构使得日志的收集、存储和可视化变得高效且直观。对于开发者而言，良好的日志管理是问题排查和性能监控的重要工具，希望这篇文章能帮助你更深入地了解 EFK 架构，提升你的运维能力！

整理的一些关于【be】的项目学习资料（附讲解～～），需要自取：

 https://d.51cto.com/f2PFnN