Redis 安装、配置与优化

最新推荐文章于 2024-08-30 11:48:50 发布

是小甜甜吖

最新推荐文章于 2024-08-30 11:48:50 发布

阅读量8

点赞数

文章标签： redis 数据库缓存

引言

随着现代互联网技术的飞速发展，海量数据的管理和高效处理变得至关重要。在这个背景下，非关系型数据库（NoSQL）的应用变得越来越广泛。NoSQL数据库由于其高性能、可扩展性和灵活的数据模型，成为了应对大数据和高并发应用的理想选择。而在众多NoSQL数据库中，Redis因其卓越的性能和丰富的功能，得到了广泛的认可和应用。

Redis，全称Remote Dictionary Server，是一个开源的内存数据结构存储系统，主要用于作为数据库、缓存和消息代理。它支持多种数据结构，如字符串、哈希表、列表、集合和有序集合等。Redis采用内存存储，并提供持久化机制，能够在内存和硬盘之间进行数据同步，保证数据的高效读写和可靠存储。

在正式开始学习Redis之前，我们有必要先了解一下关系型数据库和非关系型数据库的基本概念和区别。关系型数据库是一种结构化的数据库，基于关系模型，通过SQL语言进行数据的管理和操作。常见的关系型数据库包括MySQL、Oracle、SQL Server等。这类数据库在处理结构化数据、复杂查询和事务管理方面具有优势，但在面对大规模数据、高并发请求时，容易出现性能瓶颈和扩展性问题。

非关系型数据库（NoSQL）则是一类专门为处理大规模数据和高并发访问而设计的数据库系统。NoSQL数据库种类繁多，包含键值数据库、文档数据库、列族数据库和图数据库等。它们在数据模型、存储方式和应用场景上各不相同，但都强调高性能和高扩展性。主流的NoSQL数据库包括Redis、MongoDB、Cassandra、HBase等。

Redis作为一种典型的NoSQL数据库，具有极高的数据读写速度和丰富的数据类型支持。它不仅能够处理简单的键值对数据，还可以处理复杂的数据结构，如列表、集合和有序集合等。此外，Redis还支持数据的持久化，允许将内存中的数据保存到磁盘中，在重启时加载使用。它的高性能、灵活性和易用性使其成为分布式系统中的重要组成部分，广泛应用于缓存、排行榜、计数器、实时分析等场景。

一、Redis简介

1. 关系型数据库与非关系型数据库

数据库按照其结构可以分为关系型数据库和非关系型数据库。关系型数据库是基于关系模型的结构化数据库，通常面向记录，通过集合代数等数学概念和方法来处理数据。关系模型即二维表格模型，因此一个关系型数据库就是由二维表及其联系组成的数据组织。SQL（标准数据查询语言）是一种用于执行关系型数据库中数据检索和操作的语言。主流的关系型数据库包括Oracle、MySQL、SQL Server、Microsoft Access、DB2等。

非关系型数据库（NoSQL）的意思是“不仅仅是SQL”，是非关系型数据库的总称。主流的NoSQL数据库有Redis、MongoDB、HBase、CouchDB等。NoSQL数据库在存储方式、存储结构和使用场景上各不相同，强调高性能和高扩展性，广泛应用于大数据和高并发环境中。

2. 非关系型数据库的产生背景

随着Web 2.0网站的兴起，关系型数据库在应对Web 2.0网站，特别是海量数据和高并发的社交网络服务（SNS）类型的纯动态网站时，暴露出很多难以解决的问题。主要包括：

高性能需求（High Performance）：Web 2.0网站会根据用户个性化信息实时生成动态页面，无法使用静态页面技术，因此数据库的并发负载非常高。关系型数据库在应对上万次的查询请求时还能勉强支撑，但面对上万次的写数据请求时，硬盘I/O已无法承受。
海量数据存储与访问需求（Huge Storage）：SNS网站如Facebook每天会产生大量用户动态信息。面对数亿条记录的表，关系型数据库的查询效率非常低。
高可扩展性与高可用性需求（High Scalability & High Availability）：数据库是最难进行横向扩展的部分。当应用系统用户量和访问量增长时，数据库无法简单通过添加硬件和服务器节点来扩展性能和负载能力。尤其是对于24小时提供服务的网站，数据库的升级与扩展往往伴随着停机维护和数据迁移，工作量庞大。

关系型数据库和非关系型数据库各有特点与应用场景，两者的结合能为Web 2.0数据库发展带来新的思路。关系数据库关注关系，非关系型数据库关注存储。例如，在读写分离的MySQL数据库环境中，可以将常访问数据存储在非关系型数据库中，提升访问速度。

3. Redis基础

Redis（Remote Dictionary Server，远程字典服务器）是一个开源的、使用C语言编写的NoSQL数据库。它基于内存运行并支持持久化，以键值对的形式存储数据，是分布式架构中不可或缺的一环。Redis服务器程序是单进程模型，可以在一台服务器上同时启动多个Redis进程，但实际处理速度依赖主进程执行效率。若在服务器上只运行一个Redis进程，当多个客户端同时访问时，处理能力会有所下降；若开启多个Redis进程，能提高并发处理能力，但会增加服务器CPU负担。因此，在实际生产环境中，需要根据需求决定开启多少个Redis进程。

Redis具有以下优点：

极高的数据读写速度：数据读取速度最高可达110000次/秒，数据写入速度最高可达81000次/秒。
支持丰富的数据类型：不仅支持简单的键值对数据，还支持字符串、列表、哈希、集合及有序集合等数据类型操作。
支持数据持久化：可以将内存中的数据保存在磁盘中，重启时可以再次加载使用。
原子性：所有操作都是原子性的。
支持数据备份：即主从模式的数据备份。

Redis作为基于内存运行的数据库，缓存是其最常应用的场景之一。除此之外，Redis常见应用场景还包括获取最新N个数据的操作、排行榜类应用、计数器应用、存储关系、实时分析系统、日志记录等

二、Redis安装与配置

Redis安装

Redis的安装过程相对简单。首先，需要从Redis官网（https://www.redis.io）下载相应的源码软件包，并将其上传至Linux系统的服务器中进行解压和安装。本次示例中使用的是redis-4.0.9.tar.gz版本。

通常，在Linux系统中进行源码编译安装需要先执行./configure进行环境检查与配置，从而生成Makefile文件，然后再执行make && make install命令进行编译安装。而Redis的源码包中已经直接提供了Makefile文件，因此在解压软件包后，可以直接进入解压后的目录，执行make和make install命令进行安装。

具体安装步骤如下：

[root@localhost src]# tar xvzf redis-4.0.9.tar.gz
[root@localhost src]# cd redis-4.0.9
[root@localhost redis-4.0.9]# make
[root@localhost redis-4.0.9]# make PREFIX=/usr/local/redis install

上述步骤完成后，会将二进制文件安装到系统中。然而，此时还没有启动脚本和配置文件。Redis软件包中默认提供了一个install_server.sh脚本文件，通过该脚本可以设置Redis服务所需的相关配置文件。当脚本运行完毕，Redis服务即已启动，默认监听端口为6379。

运行install_server.sh脚本的步骤如下：

[root@localhost redis-4.0.9]# cd /usr/src/redis-4.0.9/utils/
[root@localhost utils]# ./install_server.sh

脚本运行过程中会提示输入相关配置选项，如端口号、配置文件路径、日志文件路径等。示例如下：

Please select the redis port for this instance: [6379]
Please select the redis config file name [/etc/redis/6379.conf]
Please select the redis log file name [/var/log/redis_6379.log]
Please select the data directory for this instance [/var/lib/redis/6379]
Please select the redis executable path [/usr/local/redis/bin/redis-server]
Is this ok? Then press ENTER to go on or Ctrl-C to abort.

设置完成后，Redis服务即启动，并添加到系统的启动项中。可以使用以下命令查看Redis服务状态：

[root@localhost utils]# netstat -lnupt | grep redis

tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      5494/redis-server

此外，还可以使用/etc/init.d/redis_6379脚本来管理Redis服务，例如启动、停止和重启服务：

[root@localhost ~]# /etc/init.d/redis_6379 start
Starting Redis server...

[root@localhost ~]# /etc/init.d/redis_6379 stop
Stopping Redis server...

[root@localhost ~]# /etc/init.d/redis_6379 restart
Restarting Redis server...

Redis配置

Redis的主配置文件为/etc/redis/6379.conf，文件中由注释行和设置行两部分组成。注释行以“#”开头，提供对相关配置内容的说明。实际配置行则可以根据生产环境的需求进行调整。

常见配置参数包括：

bind 127.0.0.1 192.168.10.161：指定监听的主机地址
port 6379：指定端口号
daemonize yes：是否启用守护进程模式
pidfile /var/run/redis_6379.pid：指定PID文件路径
loglevel notice：日志级别
logfile /var/log/redis_6379.log：指定日志文件路径

配置完成后，可以通过重启Redis服务使配置生效：

[root@localhost ~]# /etc/init.d/redis_6379 restart
Stopping Redis server...
Starting Redis server...

除了上述基本配置参数，Redis的主配置文件中还包含许多其它参数，具体内容如表所示：

参数	作用
`timeout 300`	当客户端闲置多长时间后关闭连接，如果指定为0表示关闭该功能
`dbfilename dump.rdb`	指定本地数据库文件名，默认值为`dump.rdb`
`dir /var/lib/redis/6379`	指定本地数据库存放目录
`maxclients 10000`	设置同一时间最大客户端连接数，默认为10000。当客户端连接数到达限制时，Redis会关闭新的连接
`rdbcompression yes`	指定存储至本地数据库时是否压缩数据，默认为yes
`slaveof <masterip> <masterport>`	当本机为从服务器时，设置主服务的IP地址及端口。在Redis启动时，从服务器会自动同步数据
`masterauth <master-password>`	当主服务设置了密码保护时，从服务器连接主服务的密码
`requirepass foobared`	设置Redis连接密码，如果配置了连接密码，客户端在连接时需要提供密码
`maxmemory <bytes>`	指定Redis最大内存限制，达到最大内存后，Redis会尝试清除已到期的Key。如果仍然达到最大内存限制，无法再进行写入操作，但仍然可以进行读取操作
`appendonly no`	指定是否在每次更新操作后进行日志记录，默认为no
`appendfilename appendonly.aof`	指定更新日志文件名，默认为`appendonly.aof`
`appendfsync everysec`	指定更新日志条件，可选值有`no`、`always`、`everysec`，默认值为`everysec`
`activerehashing yes`	指定是否激活重置哈希，默认为开启
`include /path/to/local.conf`	指定包含其它的配置文件，可以在同一主机上多个Redis实例之间使用同一份配置文件，但同时每个实例又拥有自己的特定配置文件

Redis安装与配置完成后，可以根据需求调整相应的配置参数，以优化Redis的性能和稳定性。

三、Redis命令工具

Redis提供了一系列命令工具，这些工具在安装Redis服务时就会被同时安装到系统中，用户可以直接在系统中使用它们。这些工具主要包括以下几种：

redis-server：用于启动Redis的工具；
redis-benchmark：用于检测Redis在本机的运行效率；
redis-check-aof：用于修复AOF持久化文件；
redis-check-rdb：用于修复RDB持久化文件；
redis-cli：Redis命令行工具。

以下详细介绍redis-cli和redis-benchmark两个命令工具的使用方法。

1. redis-cli 命令行工具

Redis数据库系统采用典型的C/S（客户端/服务器端）架构，访问Redis数据库需要使用专门的客户端软件。Redis服务的客户端软件就是其自带的redis-cli命令行工具。使用redis-cli连接指定数据库，连接成功后会进入提示符为“远程主机IP地址：端口号>”的数据库操作环境，例如127.0.0.1:6379>。用户可以输入各种操作语句对数据库进行管理。例如执行ping`命令可以检测Redis服务是否启动。

[root@localhost ~]# /usr/local/redis/bin/redis-cli  // 连接本机Redis数据库
127.0.0.1:6379> ping  // 检测 redis 服务是否启动
PONG

在进行数据库连接操作时，可以通过选项来指定远程主机上的Redis数据库。命令语法为：

其中，-h指定远程主机，-p指定Redis服务的端口号，-a指定密码。若不添加任何选项表示连接本机上的Redis数据库，若未设置数据库密码可以省略-a选项。例如执行以下命令可连接到主机为192.168.10.161，端口为6379的Redis数据库，并查看Redis服务的统计信息：

在数据库操作环境中，使用help命令可以获取命令类型的帮助。有三种获取命令帮助的方式：

help @<group>：获取<group>中的命令列表；
help <command>：获取某个命令的帮助；
help <tab>：获取可能帮助的主题列表。

具体操作方法如下所示：

[root@localhost ~]# redis-cli

127.0.0.1:6379> help @list  // 查看所有与List数据类型的相关命令

2. redis-benchmark 测试工具

redis-benchmark是官方自带的Redis性能测试工具，可以有效地测试Redis服务的性能。基本的测试语法为：

常用选项如下所示：

-h：指定服务器主机名；
-p：指定服务器端口；
-s：指定服务器socket；
-c：指定并发连接数；
-n：指定请求数；
-d：以字节的形式指定SET/GET值的数据大小；
-k：1=keep alive，0=reconnect；
-r：SET/GET/INCR使用随机key，SADD使用随机值；
-P：通过管道传输<numreq>请求；
-q：强制退出redis。仅显示query/sec值；
--csv：以CSV格式输出；
-l：生成循环，永久执行测试；
-t：仅运行以逗号分隔的测试命令列表；
-I：Idle模式。仅打开N个idle连接并等待。

结合上述选项，可以针对某台Redis服务器进行性能检测。例如执行以下命令即可向IP地址为192.168.10.161、端口为6379的Redis服务器发送100个并发连接与100000个请求测试性能：

部分输出示例如下：

8225.04 requests per second
======MSET(10 keys)======
100000 requests completed in 1.57 seconds
100 parallel clients
3 bytes payload
keep alive: 1
24.75% <= 1 milliseconds
99.02% <= 2 milliseconds
99.57% <= 3 milliseconds
99.90% <= 4 milliseconds
99.98% <= 5 milliseconds
100.00% <= 5 milliseconds
63653.72 requests per second

此外，还可以测试某些操作的性能，例如执行以下命令可以测试本机上Redis服务在进行set与lpush操作时的性能：

部分输出示例如下：

四、Redis持久化技术

1. Redis持久化简介

Redis 是一种高级的 key-value 数据库，不同于 Memcached 的地方在于其支持持久化功能。持久化是指将内存中的数据保存在磁盘上，以确保在系统重启后数据不会丢失。Redis 的持久化技术分为两种主要方式：RDB（Redis Database Backup）持久化和 AOF（Append Only File）持久化。

2. RDB 持久化

RDB 持久化是指在指定的时间间隔内将内存中的数据集快照（snapshot）写入磁盘。具体过程是 Redis 通过 fork 一个子进程，子进程将数据集写入一个临时文件，写入成功后，再替换之前的 RDB 文件。这个过程通常被称为“快照持久化”。RDB 持久化的优点包括：

文件单一：整个 Redis 数据库包含在一个 RDB 文件中，便于备份和迁移。
快速恢复：在大数据集的情况下，RDB 的恢复速度比 AOF 快。
性能优越：由于持久化过程在子进程中进行，不影响 Redis 主进程的性能。

然而，RDB 持久化也有其缺点：

数据丢失风险：由于 RDB 是在指定的时间间隔内进行快照操作，如果在快照之间的时间内 Redis 宕机，则这段时间内的数据会丢失。
开销大：在数据集较大时，fork 子进程的操作可能导致服务短暂的暂停。

3. AOF 持久化

AOF 持久化通过记录 Redis 处理的每一个写操作（例如 set、sadd 等）来实现，这些操作以日志的形式记录下来。AOF 持久化的优点包括：

更高的数据安全性：AOF 记录每一次写操作，可以配置为每秒同步一次（appendfsync everysec），从而最大限度地减少数据丢失。
可读性强：AOF 文件以文本形式保存，可以直接通过文本编辑器查看，便于故障排查。

AOF 持久化的缺点则包括：

文件体积大：对于相同的数据集，AOF 文件通常比 RDB 文件大。
恢复速度较慢：由于需要重新执行 AOF 文件中记录的每一个命令来恢复数据集，因此恢复速度相对较慢。

4. 持久化方式的选择

在实际应用中，如何选择持久化方式取决于具体需求。如果系统要求数据一致性高、允许较少的数据丢失，那么 AOF 持久化是更好的选择。如果系统对性能要求较高，并且能够容忍一定程度的数据丢失，那么 RDB 持久化则更为合适。两种方式也可以结合使用，以达到最佳效果。

5. RDB 持久化配置

可以通过修改 Redis 配置文件来设置 RDB 持久化的快照频率，例如：

save 900 1：在 900 秒（15 分钟）内，如果至少有 1 个 key 发生变化，则进行快照。
save 300 10：在 300 秒（5 分钟）内，如果至少有 10 个 key 发生变化，则进行快照。
save 60 10000：在 60 秒（1 分钟）内，如果至少有 10000 个 key 发生变化，则进行快照。

6. AOF 持久化配置

Redis 提供了三种 AOF 同步策略：

appendfsync always：每次有数据修改发生时都会写入 AOF 文件，保证数据完整性但效率较低。
appendfsync everysec：每秒钟同步一次，是 AOF 的默认策略，兼顾数据安全和性能。
appendfsync no：从不同步，效率最高但数据会有丢失风险。

此外，AOF 文件会随着时间增长变得越来越大，可以通过执行 BGREWRITEAOF 命令对 AOF 文件进行重写，以移除冗余命令并减小文件体积。配置文件中还可以设置自动重写选项，如：

auto-aof-rewrite-percentage 100：当 AOF 文件的体积大于上次重写后体积的 100% 时，触发重写。
auto-aof-rewrite-min-size 64mb：当 AOF 文件的体积大于 64MB 时，触发重写。

通过合理的配置和选择，可以在性能和数据安全性之间找到最佳平衡。

五、Redis优化技术

Redis 作为一个高性能的键值对数据库，其优化技术主要集中在以下几个方面：内存优化、数据持久化优化、并发处理优化、网络性能优化以及数据分片和负载均衡。这些优化技术能够显著提高 Redis 的整体性能，确保在高并发、大数据量的情况下仍能保持高效稳定的运行。

1. 内存优化

Redis 作为一个内存数据库，内存的使用效率直接影响其性能。以下是一些内存优化的策略：

数据结构选择：根据具体需求选择合适的数据结构。Redis 提供了多种数据结构，包括字符串、列表、集合、有序集合和哈希。选择适合的数据结构可以有效减少内存消耗。例如，对于频繁变动的数据，可以使用压缩列表或哈希表。
最大内存设置：通过配置 maxmemory 参数，限制 Redis 使用的最大内存。当达到内存限制时，可以通过设置 maxmemory-policy 参数选择适当的淘汰策略，如 LRU（最近最少使用）、LFU（最不常用）等。
内存碎片整理：定期执行 MEMORY PURGE 命令，整理内存碎片，减少内存浪费，提高内存利用率。

2. 数据持久化优化

Redis 提供了两种持久化机制：RDB 和 AOF。优化持久化策略可以提高数据安全性和恢复速度：

RDB（快照）：通过配置 save 参数，定期进行数据快照，减少对性能的影响。适当调整快照间隔和数据变动量，平衡数据安全性和性能。
AOF（追加文件）：配置 appendfsync 参数，可以选择不同的同步策略（always、everysec、no），根据应用场景调整同步频率。为了避免 AOF 文件过大，定期执行 BGREWRITEAOF 命令，对 AOF 文件进行重写，移除冗余命令，压缩文件大小。

3. 并发处理优化

提高 Redis 并发处理能力，可以显著提升其性能：

多线程 I/O：Redis 6.0 引入了多线程 I/O 模式，可以通过配置 io-threads 参数启用多线程，提升网络 I/O 的并发处理能力。
管道技术：利用 Redis 的 pipeline 技术，将多个命令打包一次性发送，减少网络往返次数，提高吞吐量。
Lua 脚本：通过 Redis 提供的 Lua 脚本功能，可以将多个操作封装成一个脚本，避免多次网络通信，提高执行效率。

4. 网络性能优化

网络性能对 Redis 的整体性能也有重要影响，可以从以下几个方面进行优化：

连接池：使用连接池技术，复用 Redis 连接，减少连接建立和销毁的开销。
TCP 参数优化：调整操作系统的 TCP 参数，如 tcp-keepalive，提高网络连接的稳定性和性能。
客户端优化：选择性能优异的 Redis 客户端库，并根据具体应用场景进行优化配置，如异步操作、批量操作等。

5. 数据分片和负载均衡

在大规模分布式系统中，合理的数据分片和负载均衡策略可以显著提升 Redis 的性能：

主从复制：通过主从复制实现读写分离，主节点处理写操作，从节点处理读操作，提高系统的整体性能和可用性。
分片（Sharding）：将数据分片存储在多个 Redis 实例中，通过一致性哈希等算法实现数据分片和负载均衡，避免单个节点成为瓶颈。
Redis 集群：利用 Redis 集群功能，实现数据自动分片和故障恢复，提供高可用性和可扩展性。

通过以上优化技术，Redis 可以在高并发、大数据量的应用场景中保持高效稳定的性能。合理配置和优化 Redis，不仅可以提高数据处理能力，还可以显著降低系统资源的消耗，提高整体系统的响应速度和可靠性。

原创作者: u_16645156 转载于: https://blog.51cto.com/u_16645156/11422297

是小甜甜吖

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
Redis 安装、配置与优化

引言随着现代互联网技术的飞速发展，海量数据的管理和高效处理变得至关重要。在这个背景下，非关系型数据库（NoSQL）的应用变得越来越广泛。NoSQL数据库由于其高性能、可扩展性和灵活的数据模型，成为了应对大数据和高并发应用的理想选择。而在众多NoSQL数据库中，Redis因其卓越的性能和丰富的功能，得到了广泛的认可和应用...
复制链接

扫一扫