ELK
yunson_Liu
在工作中学习,在学习中工作;活到老学到老,学到老活到老;我一直在学习的路上活着,我也一直活在学习的路上;你呢??希望所有的爱好学习的朋友和不爱好学习但又想学习的朋友,我们一同进步吧!期待。。。巅峰之巅
展开
-
elasticsearch日志清理脚本
问题描述:对于免费版本的elk,默认情况会保留全部数据,如果不及时清理,生产环境3个月的累计数据量为27G,平均每月增加9G,本文讲解如何定期清理elk日志;解决办法1)创建脚本vi rm_es_log.shchmod +x rm_es_log.sh默认只保留最近7天的日志,可以传入参数清理其他时间的日志;我的elasticsearch有权限控制,如果无密码方式登录,需要去掉-u参数#!/bin/sh##################################### File转载 2021-06-24 19:46:11 · 1159 阅读 · 0 评论 -
ELK日志管理系统优化之filebeat+kafka+zookeeper集群
Note:安装包下载urlfilebeat下载网址:https://artifacts.elastic.co/downloads/kibana/kibana-7.5.1-linux-x86_64.tar.gzkafka下载网址:https://mirrors.cnnic.cn/apache/kafka/2.4.1/kafka_2.13-2.4.1.tgzzookeeper下载网址:ht...原创 2020-03-26 11:15:18 · 531 阅读 · 0 评论 -
ELK解决日志换行问题
我们在部署elk完后,在kibana上发现很多ERROR日志换行情况,结果会在kibana上看到多行的error日志我们常出现的ERROR日志如下[INFO][2020-03-22 22:37:05,064][org.apache.commons.httpclient.HttpMethodDirector]Retrying requestjava.net.ConnectExceptio...原创 2020-03-22 22:42:48 · 3049 阅读 · 0 评论 -
ELK使用redis做中间键,减少整个elk的压力
1、安装redis,安装部署过程这里不介绍(这里redis的ip为192.168.0.197,端口为6379)2、配置logstash的收集数并导入redis的配置文件和从redis中获取数据导入elasticsearch的两个配置文件1、配置导入redis数据的配置文件,并启动logstash服务input { file{ path => "/va...原创 2020-03-20 21:19:40 · 577 阅读 · 0 评论 -
ELK日志服务系统的安装部署
分别下载以下包及下载路径elasticsearch下载网址:https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.5.1-linux-x86_64.tar.gzlogstash下载网址:https://artifacts.elastic.co/downloads/logstash/logstash-7.5....原创 2020-01-07 21:07:23 · 539 阅读 · 0 评论 -
在Ubuntu 18.04.1上安装Elasticsearch
准备工作首先,我们从安装Ubuntu Server 18.04.1开始并运行所有更新。在本文的实例中,作者创建一个具有8个vCPU,4 GB内存和200 GB驱动器空间的虚拟机,我还在内部DNS上设置了A记录,将记录主机设置为192.168.1.15。在安装过程中,我将主机名设置为logging.admintome.lab并将静态IP设置为上述IP。在Ubuntu Server安装...原创 2019-06-18 11:47:13 · 2891 阅读 · 0 评论