egg-redis安装 配置

https://github.com/tporadowski/redis/releases 下载链接地址
在这里插入图片描述
注意勾选的地方 将redis安装文件夹添加到path环境变量中
在这里插入图片描述
验证安装是否成功1、打开cmd窗口,在安装目录下输入redis-cli.exe -h 127.0.0.1 -p 6379后回车,出现下面情况说明redis安装且连接成功
在这里插入图片描述
常见服务命令

卸载服务:redis-server --service-uninstall

开启服务:redis-server --service-start

停止服务:redis-server --service-stop

egg-redis 缓存插件和封装

npm i egg-redis --save

配置 config/plugin.js

redis : {
    enable: true,
    package: 'egg-redis',
  },

配置 app/config/config.default.js

config.redis = {
  client: {
      port: 6379,          // Redis port
      host: '127.0.0.1',   // Redis host
      password: '',
      db: 1,
  },
}

缓存库封装 app/service/cache.js

// app/service/cache.js
'use strict';

const Service = require('egg').Service;

class CacheService extends Service {
    /**
     * 获取列表
     * @param {string} key 键
     * @param {boolean} isChildObject 元素是否为对象
     * @return { array } 返回数组
     */
    async getList(key, isChildObject = false) {
        const { redis } = this.app
        let data = await redis.lrange(key, 0, -1)
        if (isChildObject) {
            data = data.map(item => {
                return JSON.parse(item);
            });
        }
        return data;
    }
    /**
     * 设置列表
     * @param {string} key 键
     * @param {object|string} value 值
     * @param {string} type 类型:push和unshift
     * @param {Number} expir 过期时间 单位秒
     * @return { Number } 返回索引
     */
    async setList(key, value, type = 'push', expir = 0) {
        const { redis } = this.app
        if (expir > 0) {
            await redis.expire(key, expir);
        }
        if (typeof value === 'object') {
            value = JSON.stringify(value);
        }
        if (type === 'push') {
            return await redis.rpush(key, value);
        }
        return await redis.lpush(key, value);
    }

    /**
     * 设置 redis 缓存
     * @param { String } key 键
     * @param {String | Object | array} value 值
     * @param { Number } expir 过期时间 单位秒
     * @return { String } 返回成功字符串OK
     */
    async set(key, value, expir = 0) {
        const { redis } = this.app
        if (expir === 0) {
            return await redis.set(key, JSON.stringify(value));
        } else {
            return await redis.set(key, JSON.stringify(value), 'EX', expir);
        }
    }

    /**
     * 获取 redis 缓存
     * @param { String } key 键
     * @return { String | array | Object } 返回获取的数据
     */
    async get(key) {
        const { redis } = this.app
        const result = await redis.get(key)
        return JSON.parse(result)
    }

    /**
     * redis 自增
     * @param { String } key 键
     * @param { Number } value 自增的值 
     * @return { Number } 返回递增值
     */
    async incr(key, number = 1) {
        const { redis } = this.app
        if (number === 1) {
            return await redis.incr(key)
        } else {
            return await redis.incrby(key, number)
        }
    }

    /**
     * 查询长度
     * @param { String } key
     * @return { Number } 返回数据长度
     */
    async strlen(key) {
        const { redis } = this.app
        return await redis.strlen(key)
    }

    /**
     * 删除指定key
     * @param {String} key 
     */
    async remove(key) {
        const { redis } = this.app
        return await redis.del(key)
    }

    /**
     * 清空缓存
     */
    async clear() {
        return await this.app.redis.flushall()
    }
}

module.exports = CacheService;

调用

添加

 // 加入缓存中  缓存库使用  await this.service.cache.set('key', 'value');
    await this.service.cache.set('key', 'value')

获取

	await this.service.cache.get('key');

移除

 // 移除redis当前用户信息
   await this.service.cache.remove('key')
            
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Scrapy-Redis是一个基于Scrapy框架的扩展,它提供了与Redis数据库的集成,以实现分布式爬取和URL调度管理。要安装Scrapy-Redis,可以按照以下步骤进行操作: 1. 首先,确保你已经安装了Scrapy和Redis。你可以使用以下命令来安装Scrapy: ``` pip install scrapy ``` 要安装Redis,请参考Redis的官方文档。 2. 安装完成之后,可以使用以下命令来安装Scrapy-Redis: ``` pip install scrapy-redis ``` 安装完成后,你就可以在Scrapy项目中使用Scrapy-Redis了。记得在项目中导入Scrapy-Redis的相关模块,并按照官方文档中的指导配置和使用Scrapy-Redis的功能。 参考文献: 通过上面的修改就完成了scrapy项目到scrapy_redis项目的转变。 多台机器同时爬数据最关键的问题是urls的调度问题,调度问题没控制好,可能导致重复爬取或者有遗漏。 Scrapy-Redis框架有一台主机Master,专门用来管理urls。这里就要引入redis数据库了,redis数据库是基于内存的,速度快,且封装性好。所以用redis来管理urls。我们把要爬取的urls放入redis中,并做去重处理,每爬取一个url,就把这url从redis中删除,最后redis中没有url就表明爬虫完成。其他从机Slave要做的是从主机的redis获取url,然后运行爬虫程序。 Scrapy项目转换成Scrapy-Redis项目。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [Scrapy-Redis项目的搭建和部署](https://blog.csdn.net/qq_28463395/article/details/103215562)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

时光浅止

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值