2021年07月_kele_baba

原创消息队列之Kafka系统架构———Zookeeper+Kafka集群部署

Kafka系统架构———Zookeeper+Kafka集群部署一. Kafka 概述1. 什么是消息队列2. 为什么需要消息队列（MQ）3. 使用消息队列的好处4. 消息队列的两种模式二. Kafka 定义三. Kafka 简介四. Kafka 的特性五. Kafka 系统架构1. Broker2. Topic3. Partition==3.1 Partation 数据路由规则==3.2 分区的原因4. Leader5. Follower6. Replica7. Producer8. Consumer9.

2021-07-22 17:48:26 1993 4

原创 Dockerfile镜像实战

Dockerfile镜像实战一. 构建SSH镜像二. 构建Systemctl镜像三. 构建nginx镜像四. 构建tomcat 镜像五. 构建mysql镜像一. 构建SSH镜像mkdir /opt/sshdcd /opt/sshdvim Dockerfile#第一行必须指明基于的基础镜像FROM centos:7#作者信息MAINTAINER this is ssh image <wl>#镜像的操作指令RUN yum -y updateRUN yum -y install

2021-07-28 16:19:19 209

原创 Docker 的数据管理及网络通信

Docker 的数据管理Docker的数据管理一. 数据卷二. 数据卷容器三. 容器互联（使用centos镜像）四. Docker 镜像的创建4.1 基于现有镜像创建4.2 基于本地模板创建4.3 基于Dockerfile创建联合文件系统(UnionFs)镜像加载原理为什么Docker里的centos的大小才20OM?DockerfileDocker镜像结构的分层==Dockerfile操作常用的指令==Docker的数据管理管理Docker容器中数据主要有两种方式:数据卷（Data Volumes）和

2021-07-28 01:10:07 397

原创 Docker 网络和资源的控制

Docker 网络和资源的控制一. Docker 网络1. Docker 网络实现原理2.Docker 的网络模式3.网络模式详解3.1. host模式3.2. container模式3.3. none模式3.4. Bridge模式3.5. 自定义网络二. 资源控制1．CPU 资源控制（1）设置CPU使用率上限（2）设置CPU资源占用比（设置多个容器时才有效）一. Docker 网络安装Docker时，它会自动创建三个网络，bridge（创建容器默认连接到此网络）、 none 、host

2021-07-27 22:19:39 367

原创 docker容器中---------------yum 安装出现的报错错误操作记录

docker容器中 yum 安装出现的报错Loaded plugins: fastestmirror, langpacksCould not retrieve mirrorlist http://mirrorlist.centos.org/?release=7&arch=x86_64&repo=os error was12: Timeout on http://mirrorlist.centos.org/?release=7&arch=x86_64&repo=os: (

2021-07-27 21:32:11 1596

原创 Docker 镜像和容器操作

Docker 镜像和容器操作一. 镜像操作一. 镜像操作#搜索镜像格式：docker search 关键字docker search nginx#获取镜像格式：docker pull 仓库名称[:标签]#如果下载镜像时不指定标签，则默认会下载仓库中最新版本的镜像，即选择标签为 latest 标签。docker pull nginx#镜像加速下载浏览器访问 https://cr.console.aliyun.com/cn-hangzhou/instances/mirrors 获取镜像加

2021-07-24 00:01:07 235 1

原创一个开源的应用容器引擎Docker 概述以及安装

一个开源的应用容器引擎Docker 概述以及安装一. Docker 概述二. 为什么容器越来越受欢迎？三. Docker与虚拟机的区别四. Docker核心概念镜像容器仓库五. Docker安装一. Docker 概述Docker是一个开源的应用容器引擎，基于go语言开发并遵循了apache2.0协议开源。Docker是在Linux容器里运行应用的开源工具，是一种轻量级的“虚拟机”。 Docker的容器技术可以在一台主机上轻松为任何应用创建一个轻量级的、可移植的、自给自足的容器。Docker

2021-07-23 22:09:40 748

原创 Zookeeper概述及集群部署

Zookeeper概述前言一. Zookeeper工作机制二. Zookeeper特点三 .Zookeeper数据结构四. Zookeeper应用场景五. Zookeeper选举机制**第一次启动选举机制**非第一次启动选举机制六. 部署ZooKeeper集群1.安装前准备2.安装Zookeeper前言Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。一. Zookeeper工作机制Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框

2021-07-20 16:11:18 465

原创 ELK 企业级日志分析系统 -- 企业必用

ELK 企业级日志分析系统前言一、ELK简介二、完整日志系统基本特征三、ELK 的工作原理四、部署ELK日志分析系统1、配置elasticsearch环境2、部署elasticsearch软件3、安装elasticsearch-head插件4、安装logstash5、安装kibana总结前言日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷，性能安全性，从而及时采取措施纠正错误。

2021-07-19 17:53:44 448

原创 Redis数据类型（Hash、Set、Sorted Set）

Redis数据类型（Hash、Set、Sorted Set）前言：接上篇Redis数据类型三、Hash数据类型（散列类型）1、hset / hget / hdel / hexists / hlen / hsetnx2、hincrby3、hmset / hmget / hgetall / hkeys / hvals四、set数据类型（无序集合）1、sadd / smembers / scard / sismember2、spop / srem / srandmember / smove五、Sorted Set

2021-07-19 08:39:28 294

原创 GFS分布式文件系统---企业中数据的安全

GFS分布式文件系统一、GlusterFS简介二、GlusterFS特点三、GlusterFS术语四、GlusterFS构成五、后端存储如何定位文件六、GFS支持的七种卷七、GFS部署1、集群环境2、更改节点名称3、节点进行磁盘挂载，安装本地源4、添加节点创建集群5、根据规划创建卷（1）创建分布式卷（2）创建条带卷（3）创建复制卷（4）创建分布式条带卷一、GlusterFS简介开源的分布式文件系统由存储服务器、客户端以及NFS/Samba 存储网关组成无元数据服务器FS：文件系统文件系统组成

2021-07-16 22:34:48 414

原创 rsync远程同步、rsync+inotify实时同步

rsync下行同步、rsync+inotify实时同步一、关于rsync简介二、rsync同步源三、配置rsync源1、基本思路2、rsync命令3、配置源的两种表达方式4、免交互格式四、inotify简介五、配置rsync下行同步1、Master（192.168.118.12）2、Slave（192.168.118.17）3、验证六、rsync+inotify实时同步1、Master（192.168.118.12）2、Slave（192.168.118.17）3、验证一、关于rsync简介rsync

2021-07-15 23:30:13 180 1

原创 redis服务之主从复制、哨兵模式、群集模式

redis服务之主从复制、哨兵模式、群集模式前言一、Redis主从复制1、Redis主从复制的概念2、Redis主从复制的作用3、Redis主从复制的流程4、Redis主从复制的搭建（1）安装Redis（所有主机）（2）修改Master节点Redis配置文件（3）修改Slave节点Redis配置文件（4）验证主从效果二、Redis 哨兵模式1、哨兵模式的原理2、哨兵模式的作用3、哨兵模式的结构4、哨兵模式的搭建（1）修改 Redis 配置文件（所有节点操作）（2）启动哨兵模式（3）查看哨兵模式信息（4）故障

2021-07-15 01:27:18 110

原创 Redis数据类型（String、List）

Redis数据类型一、String数据类型1、set / get / append / strlen2、incr / decr / incrby / decrby3、getset4、setex5、setnx6、mset / mget / msetnx二、List数据类型1、lpush / lpushx / lrange2、lpop / llen3、lrem / lset / lindex / ltrim4、linsert5、rpush / rpushx / rpop / rpoplpush三、Hash数据类

2021-07-12 17:20:18 329

原创关系型数据库与非关系型数据库，Redis简介、常用命令及优化

关系型数据库与非关系型数据库，Redis简介、常用命令及优化一、关系数据库与非关系型数据库概述1、关系型数据库2、非关系型数据库二、关系数据库与非关系型数据库区别1、数据存储方式不同2、扩展方式不同3、对事务性的支持不同三、非关系型数据库产生背景四、Redis简介1、Redis 优点五、Redis 安装部署六、Redis 命令工具1、redis-cli 命令行工具2、redis-benchmark 测试工具3、Redis 数据库常用命令4、Redis 多数据库常用命令七、Redis 高可用八、Redis 持

2021-07-09 09:44:00 631 1

原创部署Squid 代理服务器(内含传统、透明代理服务器的配置、ACL访问控制、日志分析、反向代理)

部署Squid 代理服务器一、Squid 代理服务器1、代理的工作机制2、Squid 代理的类型二、安装 Squid 服务1、编译安装 Squid2、修改 Squid 的配置文件3、Squid 的运行控制4、创建 Squid 服务脚本三、构建传统代理服务器四、构建透明代理服务器一、Squid 代理服务器Squid 主要提供缓存加速、应用层过滤控制的功能。1、代理的工作机制代替客户机向网站请求数据，从而可以隐藏用户的真实IP地址。将获得的网页数据（静态 Web 元素）保存到缓存中并发送给客户机，以

2021-07-07 00:40:08 529

原创数据库之MHA高可用集群部署及故障切换

1.什么是MHAMHA (MasterHigh Availability)是一套优秀的MySQL高可用环境下故障切换和主从复制的软件。MHA的出现就是解决MySQL单点的问题。MySQL故障切换过程中，MHA能做到0-30秒内自动完成故障切换操作。MHA能在故障切换的过程中最大程度上保证数据的一致性，以达到真正意义上的高可用。2.MHA的组成MHA Node（数据节点)MHA Node 运行在每台MySQL服务器上。MHA Manager（管理节点）MHA Manager可以单独部署在

2021-07-04 19:34:06 430

原创 Mysql主从复制与读写分离

Mysql主从复制与读写分离1、什么是读写分离?2、为什么要读写分离呢?3、什么时候要读写分离?4、主从复制与读写分离5、mysq支持的复制类型6、主从复制的工作过程7、MySQL读写分离原理8、目前较为常见的MySQL读写分离分为以下两种:1) 基于程序代码内部实现2) 基于中间代理层实现一. 搭建 Mysql主从复制1、Mysql主从服务器时间同步2、主服务器的mysql配置3、从服务器的mysql配置4、验证主从复制效果二. 搭建 Mysql 读写分离1、安装 Java 环境2、配置 Amoeba

2021-07-01 16:00:45 245

kele_baba