2020年12月_shark_西瓜甜

12月 11月 10月 09月

原创 Elastic Stack-04-Filebeat-Logstash-Elasticsearch

一、介绍此篇文档的目的是把前几篇所说的知识点联系起来，做一个综合的使用，最终行称一个可以用于生产的简单配置方案。使用 Filebeat 搜集 Nginx 的日志，输出到 Logstash, 再由 Logstash 处理完数据后输出到 Elasticsearch。二、配置步骤1 Elasticsearchelasticsearch.ymlcluster.name: elknode.name: ela1node.data: truenetwork.host: 0.0.0.0http.po

2020-12-29 17:06:55 618 1

原创 Elastic Stack-01-Filebeat-8.3

一、安装curl -L -O https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-7.10.1-linux-x86_64.tar.gztar xzvf filebeat-7.10.1-linux-x86_64.tar.gz -C /二、启用和配置数据收集模块编辑Filebeat使用模块来收集和解析日志数据。1 查看可以启用的模块列表./filebeat modules list2 在安装目录中，启用一个或多个模块。

2020-12-29 11:49:07 1523

原创 Nginx-处理请求的流程

事件循环epoll

2020-12-28 09:37:53 175

原创 Elastic Stack-02-Logstash-7.10.0-入门

一、安装二、测试安装首先，让我们通过运行最基本的Logstash管道来测试Logstash安装。Logstash管道具有两个必需元素input和output，以及一个可选元素filter。输入插件使用来自源的数据，过滤器插件根据您的指定修改数据，输出插件将数据写入目标。测试Logstash安装，请运行最基本的Logstash管道。例如：cd logstash-7.10.1bin/logstash -e 'input { stdin { } } output { stdout {} }'需要

2020-12-28 09:02:02 2391 3

原创 Elastic Stack-04-Kibana7.10.0

一、部署和运行 Kibanacurl -L -O https://artifacts.elastic.co/downloads/kibana/kibana-7.10.1-linux-x86_64.tar.gztar xzvf kibana-7.10.1-linux-x86_64.tar.gzcd kibana-7.10.1-linux-x86_64/./bin/kibana二、设置$KBNA_HOME/config/kibana.ymlserver.host: "0.0.0.0"elast

2020-12-27 22:18:17 1522

原创 Elastic Stack-Elasticsearch7.10.0-集群优化

一、开发模式与生产模式默认情况下，Elasticsearch假定您正在开发模式下工作。如果上述任何设置的配置不正确，都会在日志文件中写入警告，但是您将能够启动和运行Elasticsearch节点。一旦您配置了类似的网络设置network.host，Elasticsearch就会假设您即将投入生产，并将上述警告升级为异常。这些异常将阻止您的Elasticsearch节点启动。这是一项重要的安全措施，可确保不会因服务器配置错误而丢失数据。二、重要的系统设置1 设置文件描述符数/文件句柄数Elastic

2020-12-27 21:22:28 855 1

原创 Elastic Stack-03-Elasticsearch7.10.0-集群部署

一、基本介绍1 集群条件集群最少 3 个节点，集群的每个节点都需要使用非 root 用户启动。2 Elasticsearch 基本概念介绍2.1 文档2.2 文档源数据_all 字段在7.0版本中已被废除_version 为了解决在大量并发写入时候文档冲突问题_score 用于标识在一次查询结果中某条数据和希望查询到的目标的相似度2.3 索引索引在不同环境下的语义2.4 Type在 7.0 之前，一个 Index 可以设置多个 Types7.0 开始一个索引只能建立一个

2020-12-27 18:44:15 1532

原创 Elastic Stack-Elasticsearch其他安装方式

一、二进制压缩包方式下载和安装Elasticsearch 是一个分布式、RESTful 风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。作为 Elastic Stack 的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。下载二进制压缩包二进制压缩包可以解压后直接使用无需编译 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.10.0-linux-x86_64.tar.gz

2020-12-26 17:36:38 961

原创字符界面全新自动化安装kvm虚拟机

官方网站下面是命令行方式创建虚拟磁盘的qemu-img create -f qcow2 /home/kvm/data/kube-master.qcow2 50G一、安装kvm 虚拟机的脚本install-virtualhost.sh#!/usr/bin/env bashset -ueset -o pipefail# 创建相关目录ls /home/kvm/{ks,virtualhost,virtual-img} 1>/dev/null 2>&1 || mkdir

2020-12-09 09:45:10 991