redis是一种非关系型数据库,数据是按照键值对形式存放的。在爬虫中主要用于维护公共的爬取队列
安装Redis
这里我们使用Pip包管理工具进行安装,执行安装命令:
pip install redis
这里我使用的是国内的源(使用国内的源安装速度比较快),如果不清楚如何window平台如何切换国内的源,可以参考如下文章
链接
检查是否安装成功
这里我们可以进入python导入redis包进行测试,如果不报错说明我们安装成功
到这里,我们redis已经安装成功了
连接Redis
1.这里我们需要先下载一个Windows版的redis,但是官方的reids并不支持Windows系统,GitHub上有一个开源项目可以下载Windows版的redis。redis下载
2. 解压文件并运行redis-server.exe,运行之后我们看到如下画面,可以看到默认端口是6379
使用Redis
在这里我们插入一条数据:
import redis
r = redis.Redis('localhost','6379')
r.set('name','gao')
r.get('name')
如下所示:
异常及原因
如果未能安装或者是开启连接redis服务,会出现如下错误