- 博客(99)
- 收藏
- 关注
RSS订阅原创 linux中的shell
shell脚本脚本：能够运行的文本1.什么是shell（解释性语言）shell时操作系统的一个软件它包括在linux内核的外部，为用户和内核之间的交互提供了一个接口系统中的命令用shell去解释shell接受系统回应的输出并显示其到屏幕中bash = GNU Bourne Again Shell2.什么是shell脚本脚本是一种解释性语言用shell脚本保存执行动作用脚本判定...
2020-07-25 14:49:31
460
原创 我为什么要学golang
为什么golang在近几年越来越火？对大多数公司来说Golang的主要优势是和C++比有GC，和Java比更简洁，和Python比更快，这就在一个不错的位置上了，没有明显的短板。以大部分程序员的水平而言，Golang的缺点还还没有到能对他们产生困扰的程度，他们自己给自己造成的麻烦比语言给他们带来的麻烦多得多。...
2020-07-25 14:15:54
263
1
原创 实现外网通过防火墙连接内网，允许内网通过http，https，ftp访问外网
要求1：不允许外网不通过防火墙访问内网1.环境配置内网：172.25.254.26防火墙：eth0：172.25.254.126（与内网网络位相同，用于连通内网）eth1：11.11.11.11外网：11.11.11.1（网关设置为防火墙eth1的IP，用于连通防火墙）外网设置vim /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=...
2019-06-18 22:35:24
2281
原创 linux中的elk（日志分析平台）
Elastic Stack (日志分析平台)提供分布式的存储、检索、分析官方文档 https://www.elastic.co/guide/index.html配置第一台主机:1.软件安装先安装jdk再安装elk包[root@server1 elk]# lselasticsearch-6.6.1.rpm jdk-8u121-linux-x64.rpm[root@server1 ...
2019-06-18 21:27:30
367
原创 saltstack中的api接口
利用api接口来实现SaltStack推送，管理集群是非常方便的手段，下面我们尝试利用API来实现Salt的功能如果server2和server3没有开启salt-minion服务，请先开启1.在server1安装salt-api服务[root@server1 _modules]# yum install -y salt-api2.配置签名证书[root@server1 private...
2019-06-18 20:50:40
429
原创 saltstack中的ssh模块（不通过从节点，直接通过ssh控制）
部署过程1.关闭节点服务（消除实验影响）[root@server2 minion]# systemctl stop salt-minion[root@server3 minion]# systemctl stop salt-minion2.新建ssh节点信息[root@server1 ~]# cd /etc/salt/[root@server1 salt]# cat roster ...
2019-06-18 20:21:08
217
原创 saltstack中的syndic（用于多级管理）
syndic是saltstack用来做集群部署的，一般结构如图：syndic就相当于salt-master的master，可以实现通过管理salt-master来管理salt-minion节点syndic的部署1.在一个salt-master(server1)指定它的topmaster[root@server1 ~]# vim /etc/salt/master1058 syndic_m...
2019-06-18 20:08:33
405
原创 saltstack中添加自定义模块
新建模块目录[root@server1 ~]# mkdir /srv/salt/_modules[root@server1 ~]# cd /srv/salt/_modules指定模块的作用[root@server1 _modules]# vim my_disk.py[root@server1 _modules]# cat my_disk.py def df(): cmd = ...
2019-06-18 19:41:16
558
原创 利用MySQL存储SaltStack推送信息
在server1(master)端向minion端推送之后，minion端会保存推送信息24小时，可是为了日后便于查看推送的信息，我们应该将这些信息长期存储起来，而存放在数据库中是个不错的选择这里要先确保server1开启了salt-masterserver2和server3开启了salt-minion如果未开启的话先开启服务部署：1.在server1端安装 mariadb-server和...
2019-06-18 18:15:15
178
原创 saltstack一键化部署keepalived负载均衡
1.在server1的/srv/salt目录下，建立keepalived目录，进到目录里边编辑安装keepalived的sls推送文件[root@server1 salt]# mkdir keepalived[root@server1 salt]# cd keepalived/[root@server1 keepalived]# mkdir files[root@server1 keepa...
2019-06-12 15:52:23
123
原创 saltstack的JINJA模块
1.调用jinja（1）脚本指定jinja参数[root@server1 apache]# pwd/srv/salt/apache[root@server1 apache]# vim install.sls httpd-install: pkg.installed: - pkgs: - httpd - php - httpd-tools...
2019-06-12 14:21:07
229
原创 Saltstack中的Grains和Pillar（角色管理）
一、Grains工具：（静态）Saltstack里的Grains功能，讲的是minion端的静态变量，在master端通过Grains可以获得minion对应的变量值。1.打开server2的grains功能，并制定其角色[root@server2 ~]# cd /etc/salt/[root@server2 salt]# vim miniongrains: roles: -...
2019-06-12 14:06:31
354
原创 SaltStack的安装及简单部署（httpd，nginx）
SaltStack简介：SaltStack是基于Python开发的一套C/S架构配置管理工具（服务器端称作Master，客户端称作Minion），它的底层使用ZeroMQ消息队列pub/sub方式通信，使用SSL证书签发的方式进行认证管理。号称世界上最快的消息队列ZeroMQ使得SaltStack能快速在成千上万台机器上进行各种操作。主要功能：Saltstack最主要的两个功能是:配置...
2019-06-12 13:52:43
363
原创 ansible实现自动化运维
一、知识剖析1.ansible简介：ansible是新出现的自动化运维工具，基于Python开发，集合了众多运维工具（puppet、cfengine、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。ansible是基于模块工作的，本身没有批量部署的能力。真正具有批量部署的是ansible所运行的模块，ansible只是提供一种框架。2.an...
2019-06-12 00:59:23
2417
原创 部署gitlab和jenkins
什么是gitlab：GitLab 是一个用于仓库管理系统的开源项目，使用Git作为代码管理工具，并在此基础上搭建起来的web服务。什么是Jenkins：Jenkins是一个开源软件项目，是基于Java开发的一种持续集成工具，用于监控持续重复的工作，旨在提供一个开放易用的软件平台，使软件的持续集成变成可能。两者结合的优势：这两者结合起来，就可以实现开发者提交代码到GitLab，J...
2019-06-11 00:17:59
279
原创 github远程仓库
为了能在任意 Git 项目上协作，你需要知道如何管理自己的远程仓库。 远程仓库是指托管在因特网或其他网络中的你的项目的版本库。1.在www.github.com官网上注册一个账号，创建自己的仓库，只能是公有的,因为在github上创建私人是需要收费的2.创建一个项目demo因为我们要以ssh方式上传代码或者获取代码，所以我们要将获取shell和远端之间的密钥[root@server1 ...
2019-06-10 13:37:07
199
原创 git（分布式版本控制系统）的部署
Git简介：开源的最先进的分布式版本控制系统，没有之一用以高效、高速的处理从很小到非常大的项目版本管理什么是版本控制系统：版本控制是一种记录一个或若干文件内容变化，以便将来查阅特定版本修订情况的系统什么是分布式版本控制系统：分布式版本控制系统（Distributed Version Control System，简称 DVCS）， 在这类系统中，像Git、Mercurial...
2019-06-10 13:02:25
353
原创 Docker中k8s集群的搭建
一，基本知识1.简介（1）官方文档：https://www.kubernetes.org.cn/docs（2）Kubernetes是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes提供了应用部署，规划，更新，维护的一种机制。（3）Kubernetes一个核心的特点就是能够自主的管理容器...
2019-06-04 13:05:02
4307
1
原创 Docker中的swarm集群的搭建
一，基本知识Swarm是Docker公司在2014年12月初发布的一套较为简单的工具，用来管理Docker集群，它将一群Docker宿主机变成一个单一的，虚拟的主机。Swarm使用标准的Docker API接口作为其前端访问入口，换言之，各种形式的Docker Client(docker client in go, docker_py, docker等)均可以直接与Swarm通信。Swarm ...
2019-06-04 11:21:06
229
原创 Docker容器中基于compose+haproxy搭建负载均衡
一，基本知识1，Docker Compose（1）Docker Compose 将所管理的容器分为三层,工程(project),服务(service)以及容器 (contaienr)。（2）Docker Compose 运行的目录下的所有文件(docker-compose.yml, extends 文件或环境变量文件等)组成一个工程,若无特殊指定工程名即为当前目录名。一个工程当中可包含多个服...
2019-06-03 18:38:55
1405
原创 Docker容器的cgroup搭建
一，基本知识1.什么是cgroupCgroups 是 control groups 的缩写，是 Linux 内核提供的一种可以限制、记录、隔离进程组（process groups）所使用的物理资源（如：cpu,memory,IO等等）的机制。最初由 google 的工程师提出，后来被整合进 Linux 内核。Cgroups 也是 LXC 为实现虚拟化所使用的资源管理手段，可以说没有cgroup...
2019-06-03 18:02:32
920
原创 Docker中容器间的相互连接
同一主机之间的容器互连一，容器的两个镜像网络段相同1.创建一个bridge模式的网络[root@server1 ~]# docker network create --driver bridge my_net19b39a773266fd5a258b525ed1588ff3fcbb8e472973e8649d1d668b1d1e4b06c[root@server1 ~]# docker ...
2019-06-03 17:00:52
2400
原创 Docker的网络管理
Docker的四种网络模式· host模式，使用–net=host指定。· container模式，使用–net=container:NAME_or_ID指定。· none模式，使用–net=none指定。· bridge模式，使用–net=bridge指定，默认设置。查看docker网络的模式[root@server1 test]# docker network lsNETWORK...
2019-06-03 14:12:28
116
原创 Docker容器之Dockerfile的编写
一、Dockerfile的编写编写DockFile实现安装httpd服务1.导入镜像[root@server1 ~]# systemctl start docker[root@server1 ~]# docker load -i rhel7.tar 2.编写Dockerfile[root@server1 ~]# mkdir /tmp/docker[root@server1 dock...
2019-06-03 13:50:24
346
原创 docker容器下创建私有库
一。Docker 仓库1.仓库是集中存放镜像文件的场所。有时候会把仓库和仓库注册服务器（Registry）混为一谈，并不严格区分。实际上，仓库注册服务器上往往存放着多个仓库，每个仓库中又包含了多个镜像，每个镜像有不同的标签（tag）。2.仓库分为公开仓库（Public）和私有仓库（Private）两种形式。最大的公开仓库是 Docker Hub，存放了数量庞大的镜像供用户下载。 国内的公开仓库...
2019-05-31 23:13:47
188
原创 docker容器获得镜像（从阿里云拉取）
一、如何从阿里云联网拉取镜像镜像用来创建容器,是容器的只读模板,默认可以从 docker hub 上下载。docker 的镜像是增量修改,每次创建新的镜像都会在父镜像上构建一个增量的层,基于 AUFS 技术。# docker search 查询镜像# docker pull 拉取镜像# docker push 推送镜像镜像默认可以从 docker hub 上下载,这是 doc...
2019-05-31 21:50:42
962
原创 Docker容器搭建及应用
Docker简介：Docker是一个用于开发、迁移、运行的开发平台。它使你能够将你的应用程序从基础架构中分离，从而可以快速交付。使用Docker，你可以以与管理应用程序相同的方式来管理这些基础架构。使用Docker的方法，进行快速开发，测试，并可以显著的减少编写代码和运行之间的时间延迟。一、 Docker的部署与安装1.安装docker和相关依赖性：[root@server1 docker...
2019-05-30 11:55:35
172
原创 hadoop+zookeeper高可用
实验所需主机环境确保server1-5都安装好jpk和hadoop创建用户[root@server1 ~]# useradd -u 1000 hadoop[root@server1 ~]# passwd hadoop安装配置##切换到hadoop用户解压安装包[root@server1 ~]# mv hadoop-3.0.3.tar.gz jdk-8u181-linux-x64.t...
2019-05-23 14:16:46
267
原创 hadoop的单机版测试和集群节点的搭建
HadoopHadoop实现了一个分布式文件系统（Hadoop Distributed FileSystem），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（highthroughput）来访问应用程序的数据，适合那些有着超大数据集（large dataset）的应用程序。HDFS放宽了（relax）POSIX的要求，可以以流的...
2019-05-22 23:39:51
373
原创 linux中的mfs文件系统
MFS1.什么是MFS文件系统：MooseFS是一个具有容错性的网络分布式文件系统。它把数据分散存放在多个物理服务器上，而呈现给用户的则是一个统一的资源。2.MooseFS文件系统结构包括一下四种角色：（1）管理服务器master管理服务器：负责各个数据存储服务的管理文件读写调度，文件空间回收以及恢复，多节点拷贝（2）元数据日志服务器：负责备份master服务器的变化日志文件，...
2019-05-22 16:54:43
776
原创 mfs的高可用实现
mfs的高可用配置实验环境必须保证每个节点有解析：redhat 7.3server1 172.25.26.1 mfsmaster节点server2 172.25.26.2 从节点，就是真正储存数据的节点server3 172.25.26.3 同server2server4 172.25.26.4 mfsmaster高可用节点1.server4上安装master，...
2019-05-18 23:47:46
455
原创 zabbix proxy 分布式监控
此实验是在zabbix监控平台搭建好，并且有一个agent（server3），将之前的环境清除干净（包括关闭自动发现等等）一。zabbix-proxy简介:Zabbix proxy是在大规模分布式监控场景中，采用的一种用以分担server端压力的分层结构， proxy可以代替zabbix server检索客户端的数据，然后把数据汇报给zabbix server，极大的减轻了server的负载压...
2019-05-17 01:24:37
223
原创 zabbix使用JMX监控tomcat（java类应用）
此实验是在zabbix监控平台已经搭建，并有一个监控主机server3（agent）的基础上进行的zabbix使用JMX监控tomcat1.在server3（agent的客户端）上安装tomcat和jdk,并打开tomcat[root@server3 ~]# rpm -ivh jdk-8u121-linux-x64.rpm [root@server3 ~]# tar zxf apache-...
2019-05-17 00:47:34
116
原创 Zabbix 分布式监控平台添加服务监控项（http，nginx，mysql）
此实验是在搭建好zabbix集群的基础上操作的添加 http 服务监控项1.http是zabbix自带的监控模板2.点击 配置->主机-> server2 ->模版 ->选择 -> Template App HTTP Service这样主机 server2的监控项中就出现了 HTTP 服务二。监控nginx服务nginx监控项zabbix没有，需...
2019-05-17 00:12:09
825
原创 使用API 在zabbix监控系统中查看，创建及删除监控主机
什么是API：API（Application ProgrammingInterface,应用程序编程接口）是一些预先定义的函数，目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力，而又无需访问源码，或理解内部工作机制的细节。简单的说，API就是对外的接口，利用API可以直接到达软件硬件内部来进行操作zabbix中API的作用：Zabbix API为批量操作、第三方软件集成...
2019-05-16 22:28:53
287
原创 zabbix主机的添加
环境配置1.server1：[root@server1 4.0]# systemctl start zabbix-server[root@server1 4.0]# systemctl start zabbix-agent[root@server1 4.0]# systemctl start httpd[root@server1 4.0]# systemctl start mariadb...
2019-05-16 21:20:06
202
原创 Redis集群，利用Gearman做mysql 的缓存服务器（lnmp架构）
Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误.Redis 集群通过分区来提供一定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下继续处理命令.Redis 集群的优势:自动分割数据到不同的节点上。整个集群...
2019-05-15 00:14:12
203
原创 Redis的主从复制和高可用搭建(sentinel哨兵机制)
实验环境：server1：172.25.26.1 masterserver2：172.25.26.2 slaveserver3：172.25.26.3 slave一、redis的主从复制1.编译安装软件（server1，server2，server3都做）（1）下载安装包，并解压[root@server1 ~]# lsredis-5.0.3.tar.gz[root@server...
2019-05-10 14:56:29
148
原创 zabbix的部署安装
Zabbix简介:zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。zabbix能监视各种网络参数，保证服务器系统的安全运营；并提供灵活的通知机制以让系统管理员快速定位/解决存在的各种问题。zabbix由zabbix server与可选组件zabbix agent两部门组成。zabbix server可以通过SNMP，zabbix agent，p...
2019-05-09 23:59:36
175
原创 基于MHA的MySQL高可用架构搭建
MHA简介MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本DeNA公司youshimaton（现就职于Facebook公司）开发，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，MHA能做到在0~30秒之内自动完成数据库的故障切换操作，并且在进行故障切换的过程中，MHA能...
2019-05-09 14:17:20
280
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人