Django学习笔记1-redis数据库

最新推荐文章于 2023-02-06 17:39:05 发布

陈弟弟

最新推荐文章于 2023-02-06 17:39:05 发布

阅读量265

点赞数

分类专栏： Django学习数据库学习文章标签： python 数据库 redis linux django

本文链接：https://blog.csdn.net/weixin_41446786/article/details/107413191

版权

Django学习同时被 2 个专栏收录

9 篇文章 0 订阅

订阅专栏

数据库学习

8 篇文章 0 订阅

订阅专栏

NoSQL：一类新出现的数据库(not only sql)
泛指非关系型的数据库

不支持SQL语法
存储结构跟传统关系型数据库中的那种关系表完全不同，nosql中存储的数据都是KV形式
NoSQL的世界中没有一种通用的语言，每种nosql数据库都有自己的api和语法，以及擅长的业务场景
NoSQL中的产品种类相当多：
Redis
Mongodb
Hbase hadoop
Cassandra hadoop

NoSQL和SQL数据库的比较：

适用场景不同：sql数据库适合用于关系特别复杂的数据查询场景，nosql反之
事务特性的支持：sql对事务的支持非常完善，而nosql基本不支持事务
两者在不断地取长补短，呈现融合趋势

Redis简介

Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。从2010年3月15日起，Redis的开发工作由VMware主持。从2013年5月开始，Redis的开发由Pivotal赞助。
Redis是 NoSQL技术阵营中的一员，它通过多种键值数据类型来适应不同场景下的存储需求，借助一些高层级的接口使用其可以胜任，如缓存、队列系统的不同角色

Redis特性

Redis 与其他 key - value 缓存产品有以下三个特点：
Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。
Redis不仅仅支持简单的key-value类型的数据，同时还提供list，set，zset，hash等数据结构的存储。
Redis支持数据的备份，即master-slave模式的数据备份。

Redis 优势

性能极高 – Redis能读的速度是110000次/s,写的速度是81000次/s 。
丰富的数据类型 – Redis支持二进制案例的 Strings, Lists, Hashes, Sets 及 Ordered Sets 数据类型操作。
原子 – Redis的所有操作都是原子性的。
丰富的特性 – Redis还支持 publish/subscribe, 通知, key 过期等等特性。

Redis应用场景

用来做缓存(ehcache/memcached)——redis的所有数据是放在内存中的（内存数据库）
可以在某些特定应用场景下替代传统数据库——比如社交类的应用
在一些大型系统中，巧妙地实现一些特定的功能：session共享、购物车
只要你有丰富的想象力，redis可以用在可以给你无限的惊喜…….

1、Redis的安装（乌班图16.04）

当前redis最新稳定版本是4.0.9
最新稳定版本下载链接： http://download.redis.io/releases/redis-4.0.9.tar.gz
step1:下载

wget http://download.redis.io/releases/redis-4.0.9.tar.gz

在这里插入图片描述

step2:解压

 tar xzf redis-4.0.9.tar.gz

step3:移动，放到usr/local⽬录下

sudo mv ./redis-4.0.9 /usr/local/redis/

step4:进⼊redis⽬录

cd /usr/local/redis/

step5:生成

  sudo make

step6:测试,这段运⾏时间会较⻓

 sudo make test

step7:安装,将redis的命令安装到/usr/local/bin/⽬录

sudo make install

step8:安装完成后，我们进入目录/usr/local/bin中查看

cd /usr/local/bin
ls -all

        redis-server redis服务器
        redis-cli redis命令行客户端
        redis-benchmark redis性能测试工具
        redis-check-aof AOF文件修复工具
        redis-check-rdb RDB文件检索工具

在这里插入图片描述

step9:配置⽂件，移动到/etc/⽬录下
配置⽂件⽬录为/usr/local/redis/redis.conf

sudo cp /usr/local/redis/redis.conf /etc/redis/

在这里插入图片描述

2、配置

Redis的配置信息在/etc/redis/redis.conf下。
（1）查看

sudo vi /etc/redis/redis.conf

（2）核心配置选项
绑定ip：如果需要远程访问，可将此⾏注释，或绑定⼀个真实ip

bind 127.0.0.1

端⼝，默认为6379

port 6379

是否以守护进程运⾏

如果以守护进程运⾏，则不会在命令⾏阻塞，类似于服务
如果以⾮守护进程运⾏，则当前终端被阻塞
设置为yes表示守护进程，设置为no表示⾮守护进程
推荐设置为yes

daemonize yes

数据⽂件

 dbfilename dump.rdb

数据⽂件存储路径

 dir /var/lib/redis

⽇志⽂件

logfile "/var/log/redis/redis-server.log"

数据库，默认有16个

database 16

主从复制，类似于双机备份。

slaveof

3、服务端和客服端命令

**（1）服务器端：**服务器端的命令为redis-server
help查看帮助⽂档

redis-server --help

查看redis服务器进程

ps aux | grep redis

杀死redis服务器

sudo kill -9 pid

指定加载的配置文件

sudo redis-server /etc/redis/redis.conf

（2）客服端： 客服端的命令为redis-cli
help查看帮助⽂档

redis-cli --help

连接redis

redis-cli

运⾏测试命令

ping

在这里插入图片描述
切换数据库：数据库没有名称，默认有16个，通过0-15来标识，连接redis默认选择第一个数据库

select 数据库序号

在这里插入图片描述

4、数据操作

redis是key-value的数据结构，每条数据都是⼀个键值对
在这里插入图片描述
（1）键命令

查找键，参数⽀持正则表达式

keys pattern

判断键是否存在，如果存在返回1，不存在返回0

 exists key1

查看键对应的value的类型

 type key

删除键及对应的值

  del key1 key2 ...

设置过期时间，以秒为单位

如果没有指定过期时间则⼀直存在，直到使⽤DEL移除： expire key seconds

查看有效时间，以秒为单位: ttl key

在这里插入图片描述
（2）字符串string：接受任何格式的数据（PEG图像数据或Json对象描述信息），Value最多可以容纳的数据长度是512M。

1）保存、修改：设置的键不存在则为添加，如果设置的键已经存在则修改

设置键值：

set key value

设置键值及过期时间，以秒为单位

setex key seconds value

查看有效期： ttl key
在这里插入图片描述

设置多个键值

mset key1 value1 key2 value2 ...

追加值

 append key value

2）获取

获取：根据键获取值，如果不存在此键则返回nil

  get key

根据多个键获取多个值

mget key1 key2 ...

3）删除：删除键时会将值删除

del key

在这里插入图片描述

（3）哈希hash：hash⽤于存储对象，对象的结构为属性、值；值的类型为string
1）增加、修改

- 设置单个属性

hset key field value

设置多个属性

hmset key field1 value1 field2 value2 ...

在这里插入图片描述
2）获取

获取指定键所有的属性

  hkeys key

获取指定键所有属性的值

hvals key

获取指定键⼀个属性的值

 hget key field

获取指定键多个属性的值

hmget key field1 field2 ...

在这里插入图片描述

3）删除

删除整个hash键及值，使⽤del命令：删除属性，属性对应的值会被⼀起删除

 hdel key field1 field2 ...

在这里插入图片描述

可能出现的错误：MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Commands that may modify the data set are disabled. Please check Redis logs for details about theerror.
Redis被配置为保存数据库快照，但它目前不能持久化到硬盘。用来修改集合数据的命令不能用
原因：强制关闭Redis快照导致不能持久化。
解决方案：运行config set stop-writes-on-bgsave-error no　命令后，关闭配置项stop-writes-on-bgsave-error解决该问题。

（4）列表list：列表的元素类型为string，按照插⼊顺序排序
1）增加

在左侧增加数据：

lpush key value1 value2 ...

在右侧增加数据：

 rpush key value1 value2 ...

在指定元素的前或后插⼊新元素

linsert key before或after 现有元素 新元素

2）获取

lrange key start stop

start、stop为元素的下标索引
索引从左侧开始，第⼀个元素为0
索引可以是负数，表示从尾部开始计数，如-1表示最后⼀个元素

在这里插入图片描述

3）修改：设置指定索引位置的元素值
索引从左侧开始，第⼀个元素为0
索引可以是负数，表示尾部开始计数，如-1表示最后⼀个元素

lset key index value

在这里插入图片描述

4）删除
将列表中前count次出现的值为value的元素移除
count > 0: 从头往尾移除
count < 0: 从尾往头移除
count = 0: 移除所有

 lrem key count value

在这里插入图片描述
（5）⽆序集合set：元素为string类型，元素具有唯⼀性，不重复
说明：对于集合没有修改操作
1）增加元素

sadd key member1 member2 ...

2）获取：返回所有元素

smembers key

3）删除：删除指定元素

srem key

在这里插入图片描述

（6）有序集合zset：元素为string类型，元素具有唯⼀性，不重复；每个元素都会关联⼀个double类型的score，表示权重，通过权重将元素从⼩到⼤排序
说明：对于集合没有修改操作
1）增加元素

zadd key score1 member1 score2 member2 ...

2）获取

返回指定范围内的元素

zrange key start stop

start、stop为元素的下标索引
索引从左侧开始，第⼀个元素为0
索引可以是负数，表示从尾部开始计数，如-1表示最后⼀个元素

- 返回score值在min和max之间的成员

zrangebyscore key min max

返回成员member的score值

zscore key member

3）删除：删除指定元素

srem key

5、Redis数据库和Python交互

（1）安装： sudo pip3 install redis -i http://pypi.doubanio.com/simple/ --trusted-host pypi.doubanio.com
在这里插入图片描述
（2）StrictRedis对象⽅法

通过init创建对象，指定参数host、port与指定的服务器和端⼝连接，host默认为localhost，port默认为6379，db（数据库）默认为0

sr = StrictRedis(host='localhost', port=6379, db=0)
简写
sr=StrictRedis()

根据不同的类型，拥有不同的实例⽅法可以调⽤，与前⾯学的redis命令对应，⽅法需要的参数与命令的参数⼀致
例：

# encoding=utf-8
# 1. 导入redis模块
import redis

if __name__ == "__main__":
    # 2. 创建redis的连接实例
    try:
        rs = redis.Redis()
    except Exception as e:
        print(e)
	# 3. 调用实例方法
    rs.set("name", "cjb")

在这里插入图片描述

6、搭建主从

主从概念

⼀个master可以拥有多个slave，⼀个slave⼜可以拥有多个slave，如此下去，形成了强⼤的多级服务器集群架构
master用来写数据，slave用来读数据，经统计：网站的读写比率是10:1
通过主从配置可以实现读写分离

master和slave都是一个redis实例(redis服务)

（1）配置主
1）查看当前主机的ip地址：ifconfig
在这里插入图片描述

2）修改/etc/redis/redis.conf文件

	sudo vi redis.conf
	bind 192.168.220.149

3）重启redis服务

   sudo service redis stop
   sudo redis-server redis.conf

（2）配置从
1）复制/etc/redis/redis.conf文件

sudo cp redis.conf ./slave.conf

2）修改redis/slave.conf文件

  sudo vi slave.conf

3）编辑内容

bind 192.168.220.149
slaveof 192.168.220.149 6379
port 6378

4）redis服务

sudo redis-server slave.conf
在这里插入图片描述
5）查看主从关系

redis-cli -h 192.168.220.149 info Replication

在这里插入图片描述 （3）数据操作
1）在master和slave分别执⾏info命令，查看输出信息
进入主客户端

 redis-cli -h 192.168.220.149 -p 6379

进入从的客户端

 redis-cli -h 192.168.220.149 -p 6378

在这里插入图片描述
2）在master上写数据

set sex boy

在slave上读数据

 get sex

在这里插入图片描述

7、搭建集群（仅在一台linux系统搭建）

（1）集群的概念
集群是一组相互独立的、通过高速网络互联的计算机，它们构成了一个组，并以单一系统的模式加以管理。一个客户与集群相互作用时，集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。当请求到来首先由负载均衡服务器处理，把请求转发到另外的一台服务器上。
（2）配置机器（本机IP：192.168.220.149）
⽂件的配置区别在port、pidfile、cluster-config-file三项
1）在桌面新建一个文档conf，在conf⽬录下创建⽂件7000.conf，编辑内容：

# 端口号
port 7000
# 访问的ip
bind 192.168.220.149
# 是否以守护（后台）进程方式运行
daemonize yes
# pid文件
pidfile 7000.pid
# 是否使用集群
cluster-enabled yes
# 集群的文件
cluster-config-file 7000_node.conf
# 集群的超时时间
cluster-node-timeout 15000
# 备份相关
appendonly yes

2）在桌面新建一个文档conf，在conf⽬录下创建⽂件7001.conf，编辑内容：

port 7001
bind 192.168.220.149
daemonize yes
pidfile 7001.pid
cluster-enabled yes
cluster-config-file 7001_node.conf
cluster-node-timeout 15000
appendonly yes

3）在桌面新建一个文档conf，在conf⽬录下创建⽂件7002.conf，编辑内容：

port 7002
bind 192.168.220.149
daemonize yes
pidfile 7002.pid
cluster-enabled yes
cluster-config-file 7002_node.conf
cluster-node-timeout 15000
appendonly yes

4）在桌面新建一个文档conf，在conf⽬录下创建⽂件7003.conf，编辑内容：

port 7002
bind 192.168.220.149
daemonize yes
pidfile 7002.pid
cluster-enabled yes
cluster-config-file 7002_node.conf
cluster-node-timeout 15000
appendonly yes

5）在桌面新建一个文档conf，在conf⽬录下创建⽂件7004.conf，编辑内容：

port 7002
bind 192.168.220.149
daemonize yes
pidfile 7002.pid
cluster-enabled yes
cluster-config-file 7002_node.conf
cluster-node-timeout 15000
appendonly yes

6）在桌面新建一个文档conf，在conf⽬录下创建⽂件7005.conf，编辑内容：

port 7002
bind 192.168.220.149
daemonize yes
pidfile 7002.pid
cluster-enabled yes
cluster-config-file 7002_node.conf
cluster-node-timeout 15000
appendonly yes

4）使⽤配置⽂件启动redis服务

redis-server 7000.conf
redis-server 7001.conf
redis-server 7002.conf
redis-server 7003.conf
redis-server 7004.conf
redis-server 7005.conf

在这里插入图片描述

（3）创建集群
1）redis的安装包中包含了redis-trib.rb，⽤于创建集群
将命令复制，这样可以在任何⽬录下调⽤此命令

sudo cp /usr/share/doc/redis-tools/examples/redis-trib.rb /usr/local/bin/

2）安装ruby环境，因为redis-trib.rb是⽤ruby开发的

sudo apt-get install ruby

3）运行命令创建集群

redis-trib.rb create --replicas 1 192.168.220.149:7000 192.168.220.149:7001 192.168.220.149:7002 192.168.220.149:7003 192.168.220.149:7004 192.168.220.149:7005

在这里插入图片描述

执行命令后报错：

错误分析：由于安装的 ruby 不是最新版本!，这是因为国内的防⽕墙导致⽆法下载最新版本,所以需要设置 gem 的源解决方案：更换下载源
1）查看gem 源地址是否为https://rubygems.org/，是就要更换：gem source -l

2）更换指令
gem sources --add https://gems.ruby-china.com/ --remove https://rubygems.org/ 
3）通过 gem 安装 redis 的相关依赖 sudo gem install redis
4）重新执行指令

（4）数据验证
1）根据下图可以看出，当前搭建的主服务器为7000、7001、7002，对应的从服务器是7003、7004、7005
在这里插入图片描述
2）连接7000，加参数-c表示连接到集群

redis-cli -h 192.168.220.149 -c -p 7000

3）写⼊数据

  set name cjb

4）⾃动跳到了7001服务器，并写⼊数据成功
在这里插入图片描述 5）在7001可以获取数据，如果写入数据又重定向到7000(负载均衡)

（4）使用集群和Python交互
1）安装模块：pip3 install redis-py-cluster
（redis-py-cluster源码地址https://github.com/Grokzen/redis-py-cluster）
2）创建⽂件redis_cluster.py

from rediscluster import RedisCluster


def main():
    # 1. 组织集群的host和port
    nodes = [
        {"host": "192.168.220.149", "port": "7000"},
        {"host": "192.168.220.149", "port": "7001"},
        {"host": "192.168.220.149", "port": "7002"},
    ]
    try:
        # 2. 创建集群实例，构建RedisCluster对象
        src = RedisCluster(startup_nodes=nodes, decode_responses=True)
    except Exception as e:
        print(e)

    src.set("name", "cjb")
    print(src.get("name"))


if __name__ == '__main__':
    main()

在这里插入图片描述

陈弟弟

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
Django学习笔记1-redis数据库

NoSQL：一类新出现的数据库(not only sql)泛指非关系型的数据库不支持SQL语法存储结构跟传统关系型数据库中的那种关系表完全不同，nosql中存储的数据都是KV形式NoSQL的世界中没有一种通用的语言，每种nosql数据库都有自己的api和语法，以及擅长的业务场景NoSQL中的产品种类相当多：RedisMongodbHbase hadoopCassandra hadoopNoSQL和SQL数据库的比较：适用场景不同：sql数据库适合用于关系特别复杂的数据查询场
复制链接

扫一扫