wkysdhr-CSDN博客

原创 KVM虚拟化平台

广义的 KVM 实际上包含两部分，一部分是基于 Linux 内核支持的 KVM 内核模块，另-部分就是经过简化和修改的 Qemu。KVM 内核模块是模拟处理器和内存以支持虚拟机的运行，Qemu 主要处理 I/O 以及为用户提供一个用户空间工具来进行虚拟机的管理。两者相互结合、相辅相成，构成了一个完整的虚拟化平台。

2024-07-30 18:34:08 98

大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的大量数据集合，是需要新的处理模式才能具备更强的决策能力、洞察发现能力和流程优化能力的海量、高增长率和多样化的信息资产数据。简而言之，就是数据量非常大，大到无法用常规工具处理，如关系型数据库、数据仓库等。这里的“大"又是一个什么量级呢?如阿里巴巴每天所处理的交易数据达到 20PB(即 20971520GB)。传统数据处理技术为何不能胜任?

2024-07-23 17:20:15 806

原创 FastDFS分布式存储

FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。FastDFS是一个开源的轻量级分布式文件系统，纯C实现，目前提供了C、Java和PHP API。

2024-07-22 12:01:17 995

原创高性能内存对象缓存Memcached

Memcached 是一套开源的高性能分布式内存对象缓存系统，它将所有的数据都存储在内存中，因为内存中会统一维护一张巨大的 Hash 表，所以支持任意存储类型的数据。很多网站使用 Memcached 提高网站的访问速度，尤其是需要频繁访问数据的大型网站。Memcached 是典型的 C/S 架构，因此需要构建 Memcached 服务器端与 MemcachedAPI客户端。

2024-07-18 17:10:14 689

原创 RabbitMQ消息队列

RabbitMQ 是一款在全球范围内使用非常广泛的开源消息队列中间件。它轻量级、易部署、并支持多种协议。它基于 Erlang 开发，天生拥有高并发的能力。

2024-07-16 12:19:06 721

原创 zookeeper+kafka消息队列群集部署

消息(Message)是指在应用间传送的数据。消息可以非常简单，比如只包含文本字符串，也可以更复杂，可能包含嵌入对象。消息队列(Message Queue)是一种应用间的通信方式，消息发送后可以立即返回，由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到MQ 中而不用管谁来取，消息使用者只管从MQ中取消息而不管是谁发布的。这样发布者和使用者都不用知道对方的存在。

2024-07-16 00:52:42 1228

原创 NoSQL之Redis配置与优化

Redis(RemoteDictionaryServer，远程字典型)是一个开源的、使用C语言编写的NoSQL数据库。Redis 基于内存运行并支持持久化，采用 key-value(键值对)的存储形式是目前分布式架构中不可或缺的一环。Redis服务器程序是单进程模型,也就是在一台服务器上可以同时启动多个Redis 进程,而 Redis 的实际处理速度则是完全依靠于主进程的执行效率。

2024-07-11 16:29:00 1088

原创 Haproxy搭建Web群集

Haproxy 是目前比较流行的一种群集调度工具，同类群集调度工具有很多，如LVS 和Nginx。相比较而言，LVS 性能最好，但是搭建相对复杂;Nginx的upstream模块支持群集功能，但是对群集节点健康检查功能不强，高并发性能没有 Haproxy好。

2024-07-08 12:24:36 1170

原创 LVS+keepalived群集

Keepalived 采用 VRRP(Virtual Router Redundancy Protocol，虚拟路由冗余协议)热备份协议，以软件的方式实现Linux服务器的多机热备功能。VRRP是针对路由器的一种备份解决方案--由多台路由器组成一个热备组，通过共用的虚拟 IP地址对外提供服务;每个热备组内同一时刻只有一台主路由器提供服务,其他路由器处于冗余状态。若当前在线的路由器失效，则其他路由器会自动接替(优先级决定接替顺序)虚拟IP地址，以继续提供服务。

2024-07-05 15:46:47 935

原创部署LVS-DR群集

LVS-DR(Linux Virtual Server Director Server)工作模式，是生产环境中最常用的一种工作模式。

2024-07-04 12:20:39 906 1

原创 LVS负载均衡群集

根据实际企业环境的不同，群集所提供的功能也各不相同，采用的技术细节也可能各有千秋。然而从整体上来看，需要先了解一些关于群集的共性特征，才能在构建和维护群集的工作中做到心中有数，避免操作上的盲目性。

2024-07-03 14:21:07 774

原创案例：MySQL主从复制与读写分离

在实际的生产环境中，如果对数据库的读和写都在同一个数据库服务器中操作,无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。因此，一般来说都是通过主从复制(Master-Slave)来同步数据，再通过读写分离来提升数据库并发负载能力的方案来进行部署与实施。

2024-07-01 12:27:50 685

原创 MySQL存储引擎

数据库存储引擎是数据库底层软件组件，数据库管理系统使用数据引擎进行创建、查询、更新和删除数据操作。不同的存储引擎提供不同的存储机制、索引技巧、锁定水平等功能，使用不同的存储引擎还可以获得特定的功能。现在许多数据库管理系统都支持多种不同的存储引擎。MySQL 的核心就是存储引擎。2.MySQL5.7支持的存储引擎MySQL 支持多种类型的数据库引擎，可分别根据各个引擎的功能和特性为不同的数据库处理任务提供各自不同的适应性和灵活性。

2024-06-28 17:00:07 773

原创 MySQL备份与还原

备份的主要目的是灾难恢复，备份还可以测试应用、回滚数据修改、查询历史数据、审计等。之前已经学习过如何安装 MySQL，本文将从生产运维的角度了解备份恢复的分类与方法。与完全备份不同，增量备份没有重复数据，备份量不大，时间短;但其恢复麻烦，需要上次完全备份及完全备份之后所有的增量备份才能恢复，而且要对所有增量备份进行逐个反推恢复。MySQL 没有提供直接的增量备份办法，可以通过 MySQL提供的二进制日志(binary logs)间接实现增量备份。

2024-06-27 22:58:38 1096

原创 MySQL索引、事物

当数据保存在磁盘类存储介质上时，它是作为数据块存放。这些数据块是被当作一个整体来访问的，这样可以保证操作的原子性。硬盘数据块存储结构类似于链表，都包含数据部分，以及一个指向下一个节点(或数据块)的指针，不需要连续存储。记录集只能在某个关键字段上进行排序，所以如果需要在一个无序字段上进行搜索，就要执行一个线性搜索(Linear Search)的过程，平均需要访问 N/2 的数据块，N 是表示所占据的数据块数目。

2024-06-26 13:32:47 663

原创用户管理与高级SQL语句

MySQL 的连接查询，通常都是将来自两个或多个表的行结合起来，基于这些表之间的共同字段，进行数据的拼接。建立了连接之后，对在此连接上进来的每个请求，服务器检查用户要执行的操作，然后检查ser、db、host、tables_priv或columns_priv表，判断该用户是否有足够的权限来执行它。MySQL 数据库存储过程是一组为了完成特定功能的 SQL 语句的集合，存储过程在数据库中创建并保存，它不仅仅是 SQL 语句的集合，还可以加入一些特殊的控制结构，也可以控制数据的访问方式。

2024-06-25 15:13:34 630

原创 MySQL数据库管理

TRUNCATE 工作时是将表结构按原样重新建立,而 DELETE 工作时是一行一行的删除记录数据的，在速度上 TRUNCATE 会快很多,尤其在数据量比较大的时候,表现更为明显另外如果一个表中有自增字段时，使用 DELETE FROM 删除所有记录后，再次新添加的记录会从原来最大的记录 ID 后面继续自增写入记录。实际工作中，通常会建立一些低权限的用户，只负责一部分数据库、表的管理和维护操作，甚至可以对查询、修改、删除记录等各种操作做进一步的细化限制，从而将数据库的风险降至最低。

2024-06-24 12:11:22 822

原创 MySQL数据库初体验

用户定义的完整性规则是针对某一具体数据的约束条件，由应用环境决定。它反映某一具体应用所涉及的数据必须满足的语义要求。系统提供定义和检验这类完整性的机制，以便用统一的系统方法进行处理，不再由应用程序承担这项工作。

2024-06-21 22:25:34 522

原创 Tomcat 部署及优化

Label：每个 JMeter 的 element（例如 HTTP Request）都有一个 Name 属性，label显示的就是 Name 属性的值#Samples：表示你这次测试中一共发出了多少个请求，如果模拟10个用户，每个用户迭代10次，那么这里显示100，这里显示的应该是150000而不是172649，之所以是172649，是因为我中间点击停止，然后又再原来的基础上重新开始执行。

2024-06-20 12:21:32 723

原创 Nginx Rewrite

现在 Nginx 已经成为很多公司作为前端反向代理服务器的首选，在实际工作中往往会遇到很多跳转(重写 URL)的需求。比如:更换域名后需要保持旧的域名能跳转到新的域名上、某网页发生改变需要跳转到新的页面、网站防盗链等等需求。如果在后端使用的Apache服务器，虽然也能做跳转，规则库也很强大，但是用Nginx跳转效率会更高，这也是学习本章的目的所在。

2024-06-19 18:52:52 1019

原创 Nginx优化与防盗链

在生产环境中，需要隐藏 Nginx 的版本号，以避免泄漏 Nginx 的版本，使攻击者不能针对特定版本进行攻击。在隐藏版本号之前，可以使用命令 curl -I http://192.168.0.102/查看。隐藏 Nginx版本号有两种方式,第一种是修改 Nginx的主配置文件,第二种是修改 Nginx源码文件，指定不显示版本号。

2024-06-18 14:27:07 566

原创 Nginx网站服务

Nginx与 Apahce 一样，可以实现基于用户授权的访问控制，当客户端想要访问相应网站或者目录时，要求用户输入用户名和密码才能正常访问，配置步骤与 Apache 基本一致。概括为以下几个步骤。生成用户密码认证文件。修改主配置文件相对应目录，添加认证配置项。重启服务，访问测试。基于客户端的访问控制是通过客户端IP地址，决定是否允许对页面访问。Nginx 基于客户端的访问控制要比 Apache 简单，规则如下:deny IP/IP 段:拒绝某个 IP 或 IP 段的客户端访问。

2024-06-18 00:09:00 988

原创 Shell编程之循环语句与函数

在实际工作中，经常会遇到某项任务需要多次执行的情况，而每次执行时仅仅是处理的对象不一样，其他命令相同。当面对各种列表重复任务时，使用简单的if语句已经难以满足要求，而顺序编写全部代码更是显得异常烦琐、困难重重。for 循环语句，可以很好地解决类似问题。

2024-06-01 12:25:42 444

原创 Shell编程之条件语句

要使 Shell 脚本程序具备一定的“智能”，面临的第一个问题就是如何区分不同的情况以确定执行何种操作。例如，当磁盘使用率超过95%时，发送告警信息;当备份目录不存在时，能够自动创建;当源码编译程序时，若配置失败则不再继续安装等。Shell环境根据命令执行后的返回状态值($?)来判断是否执行成功，当返回值为0时表示成功，否则(非0值)表示失败或异常。使用专门的测试工具——test 命令，可以对特定条件进行测试，并根据返回值来判断条件是否成立(返回值为0表示条件成立)。

2024-05-27 15:57:40 673

原创 Shell编程规范与变量

在一些复杂的 Linux 维护工作中，大量重复性的输入和交互操作不仅费时费力，而且容易出错，而编写一个恰到好处的 Shell 脚本程序，可以批量处理、自动化地完成一系列维护任务，大大减轻管理员的负担。自定义变量是由系统用户自己定义的变量，只在用户自己的Shel 环境中有效，因此又称为本地变量。在编写 Shel 脚本程序时，通常会设置一些特定的自定义变量，以适应程序执行过程中的各种变化，满足不同的需要。Bash 中的变量操作相对比较简单，不像其他高级编程语言(如 C/C++、Java 等)那么复杂。

2024-05-25 12:25:09 559 1

原创 FTP服务配置

是一种文件传输协议，用来上传和下载，实现远程共享文件和统一管理文件。用于互联网上的控制文件的双向传输，是一个应用程序。工作在TCP/IP协议簇的，其传输协议是TCP协议提高文件传输的共享性和可靠性，使用C/S模式的工作方式。连接时同时处理服务器和客户端的连接命令和数据传输，FTP将命令和数据分开传输，提高传输效率。

2024-05-24 13:12:31 1671 1

原创 DNS域名解析服务

DNS系统在网络中的作用就是维护一个地址数据库，其中记录了各种主机域名与IP地址的对应关系，以便为客户程序提供正向或反向的地址查询服务，即正向解析与反向解析。正向解析:根据域名查IP 地址，即将指定的域名解析为相对应的IP 地址。域名的正向解析是 DNS服务器最基本的功能，也是最常用的功能。反向解析:根据IP地址查域名，即将指定的IP地址解析为相对应的域名。域名的反向解析不是很常用,只在一些特殊场合才会用到,比如可用于反垃圾邮件的验证。

2024-05-16 00:58:29 473

原创 DHCP原理与配置

当局域网络中有大量的主机时，如果逐个为每一台主机手动设置 IP 地址、默认网关、DNS 服务器地址等网络参数,显然是一个费力也未必讨好的办法。而 DHCP(Dynamic Host Configuration Protocol，动态主机配置协议)服务器的应用，正好可以解决这一问题。

2024-05-14 12:27:00 741

原创 Linux 文件系统与日志分析

在数据被误删除后，第一时间要做的就是卸载被删除数据所在的分区，如果是根分区的数据遭到误删，就需要将系统进入单用户模式，并且将根分区以只读模式挂载。中，那么还必须找到一个地方存储文件的元信息，比如文件的创建者、文件的创建日期、文件的大小等等。命令用于报告当前登录到系统中的每个用户的信息。操作系统中的日志文件，有必要了解其各自的用途，这样才能在需要的时候更快地找到问题所在，及时解决各种故障。节点中的扇区指针清零，实际文件还存储在磁盘上，如果磁盘继续以读写模式挂载，这些已删除的文件的数据块就可能被操作系。

2024-05-06 20:58:52 611

原创系统安全及应用

对于任何一个承担着安全责任的管理员，及时找出这些弱口令账号是非常必要的，这样便于采取进一步的安全措施（如提醒用户重设更安全的口令）。对于服务器主机，其物理环境的安全防护是非常重要的，不仅要保持机箱完好、机柜锁闭，还要严格控制机房的人员进出、硬件设备的现场接触等过程。如果有必要，用户可以在字典文件中添加更多的密码组合，也可以直接使用更加完整的其他字典文件。命令就可以提升执行权限。在执行过程中，分析出来的弱口令账号将即时输出，第一列为密码字串，第二列的括号内为相应的用户名（如用户 kadmin。

2024-05-05 23:17:30 930 2

wkysdhr的博客