python redis 批量插入

最新推荐文章于 2024-05-09 10:34:23 发布

羊羔叔

最新推荐文章于 2024-05-09 10:34:23 发布

阅读量989

点赞数 1

分类专栏： python redis 文章标签： redis python

本文链接：https://blog.csdn.net/ty2009137128/article/details/127654995

版权

python 同时被 2 个专栏收录

6 篇文章 0 订阅

订阅专栏

redis

1 篇文章 0 订阅

订阅专栏

在对于百万级的key 插入时, 考虑使用pipeline 批量插入的方式，话不多说，上代码：

pipeline_redis = init_redis_pool(12).client().pipeline()
len_ = len(list_)
count = 0
for key in list_:
    

    id_dict[key] = n
    n += 1
    name = "{}:{}".format("id", n)

    count += 1

    pipeline_redis.set(name, str(len_dict))

    if count % 10000 == 0:

        pipeline_redis.execute()
        print("总数{}, 已处理 {}".format(len_, n))
        count = 0

pipeline_redis.execute()