- 博客(16)
- 资源 (6)
- 收藏
- 关注
RSS订阅原创 redis 告警参数优化
redis 告警参数优化针对redis服务器TCP backlog、overcommit_memory、THP三个参数优化的说明操作系统：CentOS Linux release 7.6.1810 (Core)一、TCP backlog1、告警信息WARNING: The TCP backlog setting of 511 cannot be enforced because /pro...
2019-12-31 15:25:46
1117
原创 分布式环境下的日志处理架构（ELK）
分布式环境下的日志处理架构（ELK）一、整体架构设计filebeat: 负责日志采集，采集的日志包括服务日志、中间件日志等kafka：负责数据缓存logstash: 消费kafka的日志，经过过滤后存储到elasticsearchelasticsearch: 负责日志存储kibana: 负责日志展示二. 此架构使用的软件及版本如下:(1) filebeat-6.3.1-l...
2019-12-19 14:57:30
1186
1
原创 logstash配置
logstash配置logstash消费kafka日志，过滤后发送到elasticsearch存储日志包括：Java服务日志、redis日志、consul日志、配置中心apollo日志添加定制正则进入logstash安装目录，创建正则目录patternscd /opt/server/logstashmkdir patternsgrok配置grok的编写配置虽然不难，但是很容易出...
2019-12-19 14:08:44
856
原创 redis4.0.14集群搭建
redis集群搭建介绍完Redis集群分区规则之后，下面我们开始搭建Redis集群。搭建集 群工作需要以下三个步骤：1）准备节点。2）节点握手。3）分配槽。redis版本：4.0.14准备节点Redis集群一般由多个节点组成，节点数量至少为6个才能保证组成完整 高可用的集群。每个节点需要开启配置cluster-enabled yes，让Redis运行在集 群模式下。建议为集群内所有节...
2019-12-13 10:50:28
1625
原创 kafka集群安装
一、安装环境1、服务器准备：kafka1:172.20.67.52kafka2:172.20.67.56kafka3:172.20.67.57修改hostname依次为：kafka1、kafka2、kafka3配置hostname172.20.67.52 kafka1172.20.67.56 kafka2172.20.67.57 kafka32、zoo...
2019-12-12 18:48:57
895
原创 elasticsearch安装
1、安装JDK rpm -ivh jdk-8u231-linux-x64.rpm2、创建相关安装目录mkdir -p /opt/server/elasticsearchmkdir -p /data/elasticsearch/datamkdir -p /data/elasticsearch/logs3、下载安装包cd /opt/server/unzip elasticsearc...
2019-12-12 18:04:16
828
原创 kibana安装
1、kibana简介Kibana是一个为Elasticsearch平台分析和可视化的开源平台，使用Kibana能够搜索、展示存储在Elasticsearch中的索引数据。使用它可以很方便用图表、表格、地图展示和分析数据。Kibana能够轻松处理大量数据，通过浏览器接口能够轻松的创建和分享仪表盘，通过改变Elasticsearch查询时间，可以完成动态仪表盘。本文只介绍Kibana在linux...
2019-12-12 17:52:15
800
原创 Gradle自定义插件编写
Gradle 简介Gradle是一个基于JVM的构建工具，它提供了：像Ant一样，通用灵活的构建工具可以切换的，基于约定的构建框架强大的多工程构建支持基于Apache Ivy的强大的依赖管理支持maven, Ivy仓库支持传递性依赖管理，而不需要远程仓库或者是pom.xml和ivy.xml配置文件。对Ant的任务做了很好的集成基于Groovy，build脚本使用Groovy编写...
2019-12-11 17:53:13
2243
原创 apollo集群部署
apollo集群部署1. 准备工作1.1. 服务器准备(配置根据情况调整)准备好安装apollo的三台服务器配置4CPU，4G内存，20GB硬盘假设三台服务器IP为172.16.10.208172.16.10.209172.16.10.210修改相应hostnameapollo-1apollo-2apollo-31.2. 安装jdk1.8rpm -ivh jdk-8u...
2019-12-11 17:26:11
1611
原创 logstash安装
logstash安装从kafka接收数据，并发送到ElasticSearch采集数据有java应用程序日志、consul日志1. 安装jdk1.8rpm -ivh jdk-8u231-linux-x64.rpm[root@logstash patterns]# java -versionjava version "1.8.0_231"Java(TM) SE Runtime En...
2019-12-11 17:08:27
956
原创 安装filebeat
安装filebeatlinux安装filebeat采集consul日志，并发送到kafka1. 创建安装目录mkdir -p /opt/servermkdir -p /data/logs2. 下载安装包并解压tar -zxvf filebeat-6.3.1-linux-x86_64.tar.gz3. 重命名文件夹为filebeatmv filebeat-6.3.1-li...
2019-12-11 17:00:30
1530
原创 Consul client端安装
##Consul client端安装1. 创建相应的目录mkdir -p /data/logsmkdir -p /data/consul_data2. 下载安装包unzip consul_1.6.1_linux_amd64.zipcp consul /usr/local/bin/3. client模式启动consul，并加入集群nohup consul agent -data...
2019-12-11 16:44:35
2051
原创 Consul server集群安装
Consul server集群安装1、机器准备准备三台机器：2CPU 4G内存修改三台机器的hostname分别为consul1、consul2、consul3配置hostvim /etc/hosts10.0.0.11 zk0110.0.0.12 zk0210.0.0.13 zk032. 创建相应的目录mkdir -p /data/logsmkdir -p...
2019-12-11 16:40:34
912
原创 MinIO数据修复
一、安装minio客户端mc1、下载二进制文件wget https://dl.min.io/client/mc/release/linux-amd64/mc2、赋予可执行权限chmod +x mc二、mc admin heal1、查询admin heal命令说明[root@minio-1 minio]# ./mc admin healNAME: mc admin heal...
2019-12-11 16:32:50
10437
原创 MinIO集群安装
MinIO集群安装一、基础环境操作系统：CentOS 7.3二、准备工作机器资源（根据实际情况调整）172.16.10.2264CPU 4G内存数据盘：/minio-data1 /minio-data2 /minio-data3 /minio-data4172.16.10.2274CPU 4G内存数据盘：/minio-data1 /minio-data2 /minio-da...
2019-12-11 14:47:05
5139
原创 Zookeeper集群安装
Zookeeper集群安装一、 机器准备准备三台机器：4CPU 4G内存修改三台机器的hostname分别为zk01、zk02、zk03配置hostvim /etc/hosts10.0.0.11 zk0110.0.0.12 zk0210.0.0.13 zk03二、 安装jdkrpm -ivh jdk-8u231-linux-x64.rpm三、 下载进入要下载的版本的目录...
2019-12-11 14:16:44
886
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人