m0_59749940的博客

hadoop简介Hadoop起源于Google的三大论文：GFS：Google的分布式文件系统Google File SystemMapReduce：Google的MapReduce开源分布式并行计算框架BigTable：一个大型的分布式数据库演变关系：GFS—->HDFSGoogle MapReduce—->Hadoop MapReduceBigTable—->HBasehadoop主流版本：Apache基金会hadoopCloudera版本（

git工具使用秘籍：Git - Bookhttps://git-scm.com/book/zh/v2安装git工具：安装完Git之后，要做的第一件事就是设置你的用户名和邮件地址；这一点很重要，因为每一个Git提交都会使用这些信息，它们会写入到你的每一次提交中，不可更改如果使用了--global选项，那么该命令只需要运行一次，因为之后无论你在该系统上做任何事情，Git都会使用那些信息；当你想针对特定项目使用不同的用户名称与邮件地址时，可以在那个项目目录下运行没有--global选项的命

MFS简介MooseFS是一个具有容错性的网络分布式文件系统，它将数据分别存放在多个物理服务器或单独磁盘或分区上，确保一份数据有多个备份副本；对于访问的客户端或者用户来说，整个分布式网络文件系统集群看起来就像一个资源一样官网：https://moosefs.com/https://moosefs.com/常规特征对标准的文件操作来说，mfs用起来跟其它的类unix文件系统类似：1、分层次的结构（目录树）2、存储POSIX文件属性（权限、最后访问和修改时间）3、支持特殊文件（块和字符设备

kubernetets容器资源限制Kubernetes采用request和limit两种限制类型来对资源进行分配request(需求资源)：即运行Pod的节点必须满足运行Pod的最基本需求才能运行Podlimit(资源限额)：即运行Pod期间，可能内存使用量会增加，可以在yaml文件中设定最多能使用多少内存配置资源限额资源类型：CPU的单位是核心数，内存的单位是字节；一个容器申请0.5个CPU，就相当于申请1个CPU的一半，你也可以加个后缀m表示千分之一的概念；比如说100m的CPU

Configmap配置管理Configmap用于保存配置数据，以键值对形式存储；ConfigMap资源提供了向Pod注入配置数据的方法，旨在让镜像和配置文件解耦，以便实现镜像的可移植性和可复用性；典型的使用场景有：填充环境变量的值、设置容器内的命令行参数、填充卷的配置文件创建ConfigMap的方式有4种：使用字面值创建、使用文件创建、使用目录创建、编写configmap的yaml文件创建##使用字面值创建，键值对的方式##使用文件创建，文件名为key，文件内容为值##使

Kubernetes简介在Docker作为高级容器引擎快速发展的同时，在Google内部，容器技术已经应用了很多年，Borg系统运行管理着成千上万的容器应用；Kubernetes项目来源于Borg，可以说是集结了Borg设计思想的精华，并且吸收了Borg系统中的经验和教训；Kubernetes对计算资源进行了更高层次的抽象，通过将容器进行细致的组合，将最终的应用服务交给用户Kubernetes的好处：隐藏资源管理和错误处理，用户仅需要关注应用的开发；服务高可用、高可靠；可将负载运行在由成千上万的机器

前言docker官网：Container Runtime with Docker Engine | Dockerhttps://www.docker.com/products/container-runtime?spm=a2c6h.13651104.0.0.6d9072ffL2HnED安装docker配置docker-ce软件仓库此时yum install -y docker-ce会报错提示需要安装相关依赖包配置所需依赖包的软件仓库安装完成并启用doc

Saltstack由master和minion构成，master是服务器端，表示一台服务器；minion是客户端，表示有多台服务器。在master上发送命令给符合条件的minion，minion就会执行相应的命令，master和minion之间是通过Zero(消息队列)进行通信的。SaltStack的master端监听4505和4506端口，4505为master和minion认证通信端口，4506为master用来发送命令或接收minion的命令执行返回信息。当客户端启动后，会主动连接master

zabbix监控java应用Zabbix通过JMX（Java Management Extensions）即Java管理扩展，可以对Java应用进行监控，其利用原生的Zabbix-Java-gateway，一个Java守护进程监控JMX应用；当Zabbix-Server需要知道java应用程序的某项性能的时候，会启动自身的一个Zabbix-JavaPollers进程去连接Zabbix-Java-Gateway请求数据，而Zabbix-Java-Gateway收到请求后JMX管理API去查询特定的应用程序

基本信息zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案；由zabbix server与可选组件zabbix agent两部分构成：zabbix server可以单独监视远程服务器的服务状态，通过SNMP、zabbix agent、ping、端口监视等方法提供对远程服务器/网络状态的监视，数据收集等功能；同时也可以与zabbix agent配合，可以轮询zabbix agent主动接收监视数据（agent方式），同时还可被动接收zabbix agent发送的

基本信息HAProxy是一个使用C语言编写的自由及开放源代码软件，其提供高可用性、负载均衡，以及基于TCP和HTTP的应用程序代理HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理HAProxy运行在当前的硬件上，完全可以支持数以万计的并发连接，并且它的运行模式使得它可以很简单安全的整合进您当前的架构中，同时可以保护你的web服务器不被暴露到网络上HAProxy实现了一种事件驱动，单一进程模型，此模型支持非常大的并发连接数；多进程或多线程模型受内存限制、系

基本信息简介：LVS是Linux Virtual Server的简写，意即Linux虚拟服务器，是一个虚拟的服务器集群系统；本项目在1998年5月由章文嵩博士成立，是中国国内最早出现的自由软件项目之一使用集群技术和Linux操作系统实现一个高性能、高可用的服务器；其具有：很好的可伸缩性（Scalability）、很好的可靠性（Reliability）、很好的可管理性（Manageability）特点：可伸缩网络服务的几种结构，它们都需要一个前端的负载调度器（或者多个进行主从备份）；我们先

什么是RedisRedis（Remote Dictionary Server )，即远程字典服务，是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API，是现在最受欢迎的NoSQL（Not Only SQL）非关系型数据库之一；其的出现，很大程度补偿了memcached这类key/value存储的不足，在部分场合可以对关系数据库起到很好的补充作用；和Memcached类似，它支持存储的value类型相对更多，包括strings(字符

LAMP==Linux + Apache + Mysql + Python

一、Nginx的介绍二、Nginx的安装安装包下载地址：nginx.org安装包文件：nginx-1.20.1.tar.gz解压此压缩包：tar zxf nginx-1.20.0.tar.gzauto ##cc编译目录conf ##配置文件目录contrib ##提供语法检测字体html ##默认发布目录src ##...

封装虚拟机的意义：将虚拟机设置成类似于一个安装包的东西，使做出来的镜像文件可以快速地在其他主机上安装和使用；可以使用此镜像文件批量生成Linux系统封装步骤：

ansible roles1、ansible中的角色简介角色（roles）是ansible自1.2版本开始引入的新特性，用于层次性、结构化的组织playbook；roles能够根据层次型结构自动装载变量文件、tasks以及handlers等剧本元素；简单的说就是，roles通过分别将变量、文件、任务、模块及处理器放置于单独的目录中，并可以便捷地include它们的一种机制；角色一般用于基于主机构建服务的场景中，在企业复杂业务场景中应用的频率很高；也可以用于构建守护进程等场景中；roles以特定的层级

脚本的执行流即脚本中记录命令的执行顺序，其默认的执行流是从上到下依次执行一、for语句作用：为循环执行动作结构：for ##定义变量do ##使用变量，执行动作done ##结束标志基本格式：1、使用seq命令的执行结果为变量赋值，此命令可以在起始值和结束值之间设置步长for NUM in $(seq 1 2 8)do echo $NUMdon...

实验环境：一台主控机：172.25.254.100三台受控主机：172.25.254.10172.25.254.20172.25.254.30

一、变量的命名变量名称中只能包含数字、下划线和字母，且只能用下划线或字母开头二、变量级别全局变量：在命令行或者配置文件中设定的变量主机变量：由清单、事实收集或注册任务时设定的变量play变量：在playbook中的play和相关结构中设定的变量变量的优先级：狭窄范围变量的优先级高于广域范围的优先级三、变量的设定和使用方式1、在playbook中定义变量2、在文件中定义变量./bianliang.yml ##表示当前路径文件==/h...