- 博客(94)
- 收藏
- 关注
RSS订阅原创 Kubernetes——理论基础
K8S 的全称为 Kubernetes (K12345678S)，PS：“嘛，写全称也太累了吧，不如整个缩写”。作用用于自动部署、扩展和管理“容器化（containerized）应用程序”的开源系统。可以理解成 K8S 是负责自动化运维管理多个容器化程序（比如 Docker）的集群，是一个生态极其丰富的容器编排框架工具。由来K8S由google的Borg系统(博格系统，google内部使用的大规模容器编排工具)作为原型，后经GO语言延用Borg的思路重写并捐献给CNCF基金会开源。
2023-08-03 08:17:19
1182
原创 Ansible —— playbook 剧本
Ansible是一种强大的IT自动化工具，它的playbook剧本是其核心组件之一。playbook剧本使用YAML格式定义和描述一系列任务，将复杂的自动化配置和任务管理变得简单、易读和易于维护。本博客将介绍Ansible playbook剧本的基本概念、特点以及如何使用它来实现自动化配置和任务管理。playbook剧本是Ansible的核心组件之一，它是一个基于YAML格式的文件，用于定义和描述一系列任务。每个任务都对应一个具体的操作或配置。
2023-08-01 18:46:34
1199
原创 自动化运维工具——Ansible
Ansible是一个基于Python开发的配置管理和应用部署工具，现在也在自动化管理领域大放异彩。它融合了众多老牌运维工具的优点，Pubbet和Saltstack能实现的功能，Ansible基本上都可以实现。Ansible能批量配置、部署、管理上千台主机。比如以前需要切换到每个主机上执行的一或多个操作，使用Ansible只需在固定的一台Ansible控制节点上去完成所有主机的操作。
2023-07-30 09:25:40
1476
原创 Docker—— consul的容器服务更新与发现
服务注册与发现是微服务架构中不可或缺的重要组件。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中。如果需要调用后端服务A-N，就需要配置N个服务的网络位置，配置很麻烦后端服务的网络位置变化，都需要改变每个调用者的配置既然有这些问题，那么服务注册与发现就是解决这些问题的。
2023-07-27 15:56:25
532
原创 Docker——compose单机容器集群编排
Docker-compose是一个基于Docker的容器编排工具。它使用一个YAML文件来定义和配置多个容器的集群。通过使用Docker-compose，我们可以轻松地定义、配置和协同运行多个Docker容器，而无需手动管理它们的启动和通信。
2023-07-25 17:28:11
1051
1
原创 Docker——数据管理与网络通信
因为对于精简的OS，rootfs可以很小，只需要包含最基本的命令、工具和程序库就可以了，因为底层直接用宿主机的kernel，自己只需要提供rootfs就可以了。数据卷是一个供容器使用的特殊目录，位于容器中。Dockerfile是由多条的指令组成的文件，其中每条指令对应 Linux 中的一条命令，Docker 程序将读取Dockerfile 中的指令生成指定镜像。如果我们可以把每一层修改、安装、构建、操作的命令都写入一个脚本，用这个脚本来构建、定制镜像，那么镜像构建透明性的问题、体积的问题就都会解决。
2023-07-24 16:42:12
270
原创 Docker——网络原理
直接使用bridge模式，是无法支持指定IP运行docker的，例如执行以下命令就会报错 docker run -itd --name test1 --network bridge --ip 172.17 .0.10 nginx:latest /bin/bash。
2023-07-21 16:36:46
1321
1
原创 Docker——基本管理
Docker是一个开源的应用容器引擎，基于go语言开发并遵循了apache2.0协议开源。Docker是在Linux容器里运行应用的开源工具，是一种轻量级的“虚拟机”。Docker 的容器技术可以在一台主机上轻松为任何应用创建一个轻量级的、可移植的、自给自足的容器。
2023-07-20 13:45:13
686
原创 分布式运用——Ceph 接口创建
提供了user、subuser、bucket和object，其中的user对应于S3的user，而subuser则对应于Swift的user，不过user和subuser都不支持为bucket提供名称空间，因此不同用户的存储桶不允许同名；对象存储（object storage）是非结构数据的存储方法，对象存储中每一条数据都作为单独的对象存储，拥有唯一的地址来识别数据对象，通常用于云计算环境中。对 rbd 镜像进行快照，可以保留镜像的状态历史，另外还可以利用快照的分层技术，通过将快照克隆为新的镜像使用。
2023-07-20 13:44:03
1134
原创 分布式运用——ELK 企业级日志分析系统
ELK平台是一套完整的日志集中处理解决方案，将 ElasticSearch、Logstash 和 Kiabana 三个开源工具配合使用， 完成更强大的用户对日志的查询、排序、统计需求。Logstash 配置文件基本由三部分组成：input、output 以及 filter（可选，根据需要选择使用）。input：表示从数据源采集数据，常见的数据源如Kafka、日志文件等filter：表示数据处理层，包括对数据进行格式化处理、数据类型转换、数据过滤等，支持正则表达式。
2023-07-16 12:35:37
1357
原创 分布式运用——存储系统Ceph
Ceph是一个开源的分布式存储解决方案，旨在提供可扩展性、高性能和强大的数据可靠性。它采用了一种分布式对象存储架构，能够同时提供块存储和文件存储的功能。本篇博客将深入探索Ceph的原理、特性和应用场景，帮助读者更好地理解和使用这一强大的存储解决方案。Ceph使用C++语言开发，是一个开放、自我修复和自我管理的开源分布式存储系统。具有高扩展性、高性能、高可靠性的优点。Ceph目前已得到众多云计算厂商的支持并被广泛应用。
2023-07-14 17:11:51
5465
原创 分布式运用——监控平台 Zabbix
Zabbix是一款全面的网络监控解决方案，支持实时监控、历史数据存储、报警和可视化等功能。它可以监控服务器、网络设备、数据库、应用程序等各种资源，提供丰富的数据收集、处理和展示功能，为管理员提供全面的监控管理和故障排除能力。案列：自定义监控客户端服务器登录的人数需求：限制登录人数不超过 3 个，超过 3 个就发出报警信息。
2023-07-09 21:48:30
3376
原创 分布式运用——rsync远程同步
在Linux内核中，默认的inotify机制提供了三个调控参数：max_queue_events（监控事件队列，默认值为16384）、max_user_instances（最多监控实例数，默认值为128）、max_user_watches（每个实例最多监控文件数，默认值为8192）。是一个开源的快速备份工具，可以在不同主机之间镜像同步整个目录树，支持增量备份，并保持链接和权限，且采用优化的同步算法，传输前执行压缩，因此非常适用于异地备份、镜像服务器等应用。rsync实际用的是替换原理。
2023-07-04 18:57:03
942
原创 Redis高可用——集群模式
Redis集群引入了哈希槽的概念，Redis集群有16384个哈希槽（编号0-16383），集群的每组节点负责一部分哈希槽，每个Key通过CRC16校验后对16384取余来决定放置哪个哈希槽，通过这个值，去找到对应的插槽所对应的节点，然后直接自动跳转到这个对应的节点上进行存取操作。为每个节点添加一个从节点A1、B1、C1整个集群便有三个Master节点和三个slave节点组成，在节点B失败后，集群选举B1位为的主节点继续服务。集群中的节点分为主节点和从节点：只有主节点负责读写请求和集群信息的维护；
2023-07-03 16:30:07
770
原创 Redis高可用——主从复制
默认情况下，每台Redis服务器都是主节点；且一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点。●数据冗余：主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。●故障恢复：当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。●负载均衡：在主从复制的基础上，配合读写分离，可以由主节点提供写服务，由从节点提供读服务（即写Redis数据时应用连接主节点，读Redis数据时应用连接从节点），分担服务器负载；尤其是在写少读多的场景下，通过多个从节点
2023-07-03 15:07:12
659
原创 Redis高可用——哨兵模式
2.当主节点出现故障，此时哨兵节点会通过Raft算法（选举算法）实现选举机制共同选举出一个哨兵节点为leader，来负责处理主节点的故障转移和通知。●自动故障转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从节点升级为新的主节点，并让其它从节点改为复制新的主节点。●哨兵节点：哨兵系统由一个或多个哨兵节点组成，哨兵节点是特殊的redis节点，不存储数据。●将某一个从节点升级为新的主节点，让其它从节点指向新的主节点；●若原主节点恢复也变成从节点，并指向新的主节点；
2023-07-03 15:05:20
1602
原创 Redis高可用——持久化
在web服务器中，高可用是指服务器可以正常访问的时间，衡量的标准是在多长时间内可以提供正常服务(99.9%、99.99%、99.999%等等)。但是在Redis语境中，高可用的含义似乎要宽泛一些，除了保证提供正常服务( 如主从分离、快速容灾技术)，还需要考虑数据容量的扩展、数据安全不会丢失等。
2023-07-02 18:09:37
632
原创 MySQL数据库——主从复制和读写分离
读写分离，基本的原理是让主数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库处理SELECT查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。
2023-07-02 18:06:25
1002
原创 MySQL数据库——MHA高可用
MHA（MasterHigh Availability）是一套优秀的MySQL高可用环境下故障切换和主从复制的软件。MHA 的出现就是解决MySQL 单点的问题。MySQL故障切换过程中，MHA能做到0-30秒内自动完成故障切换操作。MHA能在故障切换的过程中最大程度上保证数据的一致性，以达到真正意义上的高可用。
2023-07-01 19:49:20
1189
原创 NOSQL——redis的安装，配置与简单操作
Redis服务器程序是单进程模型，也就是在一台服务器上可以同时启动多个Redis进程，Redis的实际处理速度则是完全依靠于主进程的执行效率。若在服务器上只运行一个Redis进程，当多个客户端同时访问时，服务器的处理能力是会有一定程度的下降；若在同一台服务器上开启多个Redis进程，Redis在提高并发处理能力的同时会给服务器的CPU造成很大压力。即：在实际生产环境中，需要根据实际的需求来决定开启多少个Redis进程。若对高并发要求更高一些，可能会考虑在同一台服务器上开启多个进程。
2023-06-29 16:20:13
2754
原创 MySQL数据库——高级查询语句
数据库是用来存储数据，更新，查询数据的工具，而查询数据是一个数据库最为核心的功能，数据库是用来承载信息，而信息是用来分析和查看的。例：SELECT A.Store_Name Store, SUM(A.Sales) “Total Sales” FROM fxk003 A GROUP BY A.Store_Name;例：SELECT Store_Name, SUM(Sales) FROM fxk003 GROUP BY Store_Name HAVING SUM(Sales) > 1500;
2023-06-28 19:37:34
6822
5
原创 MySQL数据库——存储过程
存储过程在使用过程中是将常用或者复杂的工作预先使用SQL语句写好并用一个指定的名称存储起来，这个过程经编译和优化后存储在数据库服务器中。存储过程内容的修改方法是通过删除原有存储过程，之后再以相同的名称创建新的存储过程。如果要修改存储过程的名称，可以先删除原存储过程，再以不同的命名创建新的存储过程。INOUT 输入输出参数：既表示调用者向过程传入值，又表示过程向调用者传出值（值只能是变量）仅当存在时删除，不添加 IF EXISTS 时，如果指定的过程不存在，则产生一个错误。
2023-06-28 17:08:05
1460
原创 MySQL数据库——事务
那么，在第一个事务中的两次读数据之间，由于第二个事务的修改，那么第一个事务两次读到的的数据可能是不一样的。当一个事务正在访问数据，并且对数据进行了修改，而这种修改还没有提交到数据库中，这时，另外一个事务也访问这个数据然后使用了这个数据。修改数据的事务可在另一个使用相同数据的事务开始之前访问这些数据，或者在另一一个使用相同数据的事务结束之后访问这些数据。对数据进行修改的所有并发事务是彼此隔离的，表明事务必须是独立的，它不应以任何方式依赖于或影响其他事务。事务是一个完整的操作，事务的各元素是不可分的。
2023-06-20 16:30:04
252
原创 MySQL数据库——索引
对于 MyISAM 引擎而言，索引文件和数据文件是分离的，索引文件用于保存数据记录的地址。因为索引本身会消耗系统资源，在有索引的情况下，数据库会先进行索引查询，然后定位到具体的数据行，如果索引使用不当，反而会增加数据库的负担。更新一个包含索引的表需要比更新一个没有索引的表花费更多的时间，这是由于索引本身也需要更新。从逻辑划分来看，索引的运用主要有五种，分别为：普通索引，唯一索引，主键索引，组合索引和全文索引（模糊索引）组合索引（单列索引与多列索引）：可以是单列上创建的索引，也可以是在多列上创建的索引。
2023-06-19 19:06:21
754
原创 Mysql数据库——用户管理与授权
用户信息存放在 mysql 数据库下的 user 表（MySQL 服务下存在一个系统自带的 mysql 数据库）。
2023-06-16 16:32:07
1760
原创 MySQL数据库——初步安装与数据表结构数据管理
数据库：database表：table，行：row 列：column索引：index视图：view存储过程：procedure存储函数：function触发器：trigger事件调度器：event scheduler，任务计划用户：user权限：privilege。
2023-06-15 19:18:39
1083
原创 LVS负载均衡与DR模式
发送ARP请求时，Linux默认使用IP包的源IP地址（即VIP）作为ARP请求包中的源IP地址，而不使用发送接口的IP地址。对节点服务器进行处理，设置内核参数arp_announce=2：系统不使用IP数据包的源地址来设置ARP请求的源地址，而选择发送接口（物理网卡）的IP地址。在LVS-DR负载均衡集群中，负载均衡器与节点服务器都要配置相同的VIP地址，在局域网中具有相同的IP地 址，势必会造成各服务器ARP通信的紊乱。只有前端的负载均衡器进行响应，其他节点服务器不应该响应ARP广播。
2023-06-13 19:49:24
1171
原创 Haproxy负载均衡集群
HAProxy是可提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，是免费、快速并且可靠的一种解决方案。HAProxy非常适用于并发大（并发达1w以上）web站点，这些站点通常又需要会话保持或七层处理。HAProxy的运行模式使得它可以很简单安全的整合至当前的架构中，同时可以保护web服务器不被暴露到网络上。
2023-06-13 18:26:19
1654
原创 LVS+KeepAlived高可用负载均衡集群
在主调度器能够正常运转时，由主调度器进行节点服务器业务的分配处理，其余备用调度器处于待机状态，不参与当前的集群运转。普通的群集的部署是通过一台度器控制调配多台节点服务器进行业务请求的处理，但是仅仅是一台调度器，就会存在极大的单点故障风险，当该调度器的链路或则调度器本身出现故障时，就会导致整个业务的无法正常进行。高可用集群只需要在调度器上多进行一台或两台（服务器本身的价格比较昂贵，一般备用的服务器的数量会和当前业务创造的价值对等）的设置，就可避免因调度器瘫痪业务中断的风险，所以实现了真正的高可用的效果。
2023-06-13 16:31:41
1923
原创 LVS负载均衡群集+NAT部署
（3）真实的服务器将响应数据包返回给LVS调度器，调度器在得到响应的数据包后会将源地址和源端口修改为VIP及调度器相应的端口，修改完成后，由调度器将响应数据包发送回终端用户，另外，由于LVS调度器有一个连接Hash表，该表中会记录连接请求及转发信息，当同一个连接的下一个数据包发送给调度器时，从该Hash表中可以直接找到之前的连接记录，并根据记录信息选出相同的真实服务器及端口信息。群集所提供的应用服务、由服务器池承担，其中每个节点具有独立的RIP地址(真 实IP)，只处理调度器分发过来的客户机请求。
2023-06-08 17:14:33
926
原创 Nginx+Tomcat负载均衡、动静分离
但是不是把所有的web请求转发，而是将静态页面请求Ncinx服务器自己来处理，动态页面请求，转发给后端的Tomcat服务器来处理。每个请求按访问ip的hash结果分配，这样每个访客固定访问一个后端服务器，可以解决session的问题，但是ip_hash会造成负载不均，有的服务请求接受多，有的服务请求接受少，所以不建议采用ip_hash模式，session 共享问题可用后端服务的 session 共享代替 nginx 的 ip_hash（使用后端服务器自身通过相关机制保持session同步）。
2023-06-08 16:43:22
1292
原创 Tomcat部署及优化
Tomcat 是 Java 语言开发的，Tomcat 服务器是一个免费的开放源代码的 Web 应用服务器，是 Apache 软件基金会的 Jakarta 项目中的一个核心项目，由 Apache、Sun 和其他一些公司及个人共同开发而成。Tomcat 属于轻量级应用服务器，在中小型系统和并发访问用户（据了解tomcat的并发量处理能力是nginx的六分之一）不是很多的场合下被普遍使用，是开发和调试 JSP 程序的首选。
2023-06-06 14:51:52
960
原创 Nginx网络服务——location规则与rewrite重写
精确=前缀^~正则~,~*一般通用/存在精准匹配时，直接采用在没有精准匹配的情况下，先看前缀匹配的长度，然后根据最长的前缀匹配的优先级去确定是否再去看其它正则匹配location。如果最长的前缀匹配带有 ^~ 则不再看其它正则匹配location，如果最长的前缀匹配是没有修饰符的一般匹配则会再看其它正则匹配location前缀匹配看长度，最长的优先匹配正则匹配看上下顺序，由上往下依次匹配，当有匹配成功时候，停止匹配，按当前匹配规则处理请求。
2023-06-05 19:53:52
1001
原创 Nginx网络服务——页面优化与安全
在企业网站中，为了避免同一个客户长时间占用连接，造成资源浪费，可设置相应的连接超时参数，实现控制连接访问时间。当Nginx将网页数据返回给客户端后，可设置缓存的时间，以方便在日后进行相同内容的请求时直接返回，避免重复请求，加快了访问速度。允许Nginx服务器将输出内容在发送客户端之前进行压缩，以节约网站带宽，提升用户的访问体验，默认已经安装。在高并发场景，需要启动更多的Nginx进程以保证快速响应，以处理用户的请求，避免造成阻塞。注：一般针对静态网页设置，对动态网页不设置缓存时间。方式二：浏览器访问查看。
2023-06-04 17:00:52
942
原创 Nginx网络服务——虚拟主机设置
相比较Apache的虚拟主机设置，Nginx的设置是十分简便的只需要修改主配置中的相关配置就能实现虚拟主机的效果。
2023-06-04 10:37:57
1022
原创 Nginx网络服务——主配置文件-nginx.conf
模块说明全局块全局配置，对全局生效events块配置影响 Nginx 服务器与用户的网络连接http块配置代理，缓存，日志定义等绝大多数功能和第三方模块的配置server块配置虚拟主机的相关参数，一个 http 块中可以有多个 server 块location块用于配置匹配的 uriupstream配置后端服务器具体地址，负载均衡配置不可或缺的部分。
2023-06-03 14:04:32
649
原创 Nginx网站服务——编译安装及系统服务添加
Nginx 是开源、高性能、高可靠的 Web 和反向代理服务器，而且支持热部署，几乎可以做到 7 * 24 小时不间断运行，即使运行几个月也不需要重新启动，还能在不间断服务的情况下对软件版本进行热更新稳定性高，系统资源消耗低，对HTTP并发连接的处理能力高（单台物理服务器可支持3w~5w个并发请求）
2023-06-02 14:44:05
1041
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人