redis_fdw使用简介

转载地址:http://coolcodes.tech/tech/d0c2d2254836b3ebb92c769e576028a

建议大家去原始地址查看,原始地址还有很多作者的原创博文,值得推荐


Redis FDW(Foreign Data Wrapper)为Dave&Andrew实现的Postgresql的FDW扩展插件,可以直接在postgresql里访问redis数据库,支持Posgreql9.1~9.6。

1、安装

系统环境:Fedora25 / postgresql9.5.5 / redis3.0.6 (postgresql&redis均通过dnf安装)
1) 根据个人postgresql版本的clone对应的分支代码:git clone -b REL9_5_STABLE git@github.com:pg-redis-fdw/redis_fdw.git
2) 编译安装:

 
 
  1. cd redis_fdw/
  2. make USE_PGXS=1
  3. make USE_PGXS=1 install

如果提示报错:/usr/lib/rpm/redhat/redhat-hardened-cc1 No that file and directory,运行dnf install redhat-rpm-config -y即可。

OK,安装完成。

2、实验

假设一个应用场景:在postgresql里有个表categories记录不同分类下条目的数量:

 
 
  1. CREATE TABLE categories
  2. (
  3. catid character varying(32) NOT NULL, --主键
  4. cname character varying(64), --分类名称
  5. nums integer, --条目数量
  6. CONSTRAINT categories_pkey PRIMARY KEY (catid)
  7. )

当这个表里的数据变化时,通过触发器自动更新redis里的catid--->nums映射。

准备工作

 
 
  1. postgres=# CREATE EXTENSION redis_fdw; --创建redis_fdw扩展
  2. postgres=# \dx
  3. List of installed extensions
  4. Name | Version | Schema | Description
  5. -----------+---------+------------+--------------------------------------------------
  6. redis_fdw | 1.0 | public | Foreign data wrapper for querying a Redis server
  7. -- 创建需要关联的redis服务器
  8. postgres=# CREATE SERVER redis_server
  9. FOREIGN DATA WRAPPER redis_fdw
  10. OPTIONS (address '127.0.0.1', port '6379');
  11. postgres=# \des
  12. List of foreign servers
  13. Name | Owner | Foreign-data wrapper
  14. --------------+----------+----------------------
  15. redis_server | postgres | redis_fdw
  16. --创建redis中存储catid/nums映射的虚拟表
  17. postgres=# CREATE FOREIGN TABLE rd_categories (key text, val text)
  18. SERVER redis_server
  19. OPTIONS (database '0');
  20. postgres=# \d
  21. List of relations
  22. Schema | Name | Type | Owner
  23. --------+---------------+---------------+----------
  24. public | categories | table | postgres
  25. public | rd_categories | foreign table | postgres

创建触发器:

 
 
  1. CREATE OR REPLACE FUNCTION public.insert_new_item()
  2. RETURNS trigger AS
  3. $BODY$
  4. begin
  5. insert into rd_categories values(NEW.catid, 0);
  6. return NEW;
  7. end
  8. $BODY$
  9. LANGUAGE plpgsql VOLATILE
  10. COST 100;
  11. ALTER FUNCTION public.insert_new_item()
  12. OWNER TO postgres;
  13. CREATE TRIGGER new_category
  14. AFTER INSERT
  15. ON public.categories
  16. FOR EACH ROW
  17. EXECUTE PROCEDURE public.insert_new_item();

测试:

 
 
  1. insert into categories values('123', 'ces', 0); --插入一条数据

在redis里查看:

 
 
  1. [root@w1 redis_fdw]# redis-cli
  2. 127.0.0.1:6379> keys *
  3. 1) "123"
  4. 127.0.0.1:6379> get 123
  5. "0"

参考
【1】github:pg-redis-fdw/redis_fdw
【2】PostgreSQL的postgres_fdw跨库使用

以下是对代码的一些优化和建议: 1. 在类定义中,将 REDIS_PREFIX 定义为类变量,而不是实例变量。这样可以提高代码的可读性,并且只需要在类定义中定义一次。 2. 使用 typing 模块来声明函数和方法的参数和返回值,以提高代码的可读性和可维护性。 3. 在 load_from_cache 方法中,使用 redis_client.hgetall 返回的字典对象的 items 方法来遍历键值对,而不是使用 for 循环和 get 方法。这样可以在一行代码中创建 user_cache_dict。 4. 使用 redis 的 pipeline 方法来优化 add_to_cache 方法,以减少与 redis 的通信次数。 优化后的代码如下所示: ``` from typing import List class UserCache(UserMixin): REDIS_PREFIX: str = f"{PROJECT_NAME}-user" def __init__(self, alternative_id: str, userid: str = None, username: str = None, homepage: str = None, permissions: List[str] = None): self.alternative_id = alternative_id self.userid = userid self.username = username self.homepage = homepage self.permissions = permissions or [] def get_id(self) -> str: return self.alternative_id def add_to_cache(self) -> None: values = { "alternative_id": self.alternative_id, "userid": self.userid, "username": self.username, "homepage": self.homepage, "permissions": ",".join(self.permissions), } redis_key = f"{self.REDIS_PREFIX}:{self.alternative_id}" with redis_client.pipeline() as pipe: pipe.hmset(redis_key, values) pipe.expire(redis_key, SIGNIN_LIFETIME) pipe.execute() def del_user_cache(self) -> None: redis_client.delete(f"{self.REDIS_PREFIX}:{self.alternative_id}") @classmethod def load_from_cache(cls, alternative_id: str) -> 'UserCache': redis_key = f"{cls.REDIS_PREFIX}:{alternative_id}" user_cache_dict = dict(redis_client.hgetall(redis_key).items()) if user_cache_dict: user_cache_dict['permissions'] = user_cache_dict.get('permissions', '').split(",") return cls(**user_cache_dict) ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值