Redis使用pipeline批量查询所有键值对以及multiGet用法

最新推荐文章于 2025-03-26 14:33:57 发布

尘世里一迷途小码农

最新推荐文章于 2025-03-26 14:33:57 发布

阅读量9.2k

点赞数 5

文章标签： redis 数据库 database

本文链接：https://blog.csdn.net/weixin_41484722/article/details/121035221

版权

本文探讨了如何通过将大键值对拆分为多个小键值对，并利用Redis的pipeline或多Get功能进行批量查询，以提高查询性能。实践结果显示，尽管采用了批量操作，但查询速度并未明显提升，可能是由于数据分布或Redis内部优化原因。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Redis使用pipeline批量查询所有键值对

本意是redis存储hashMap的时候单个key对应的value值存储的数据过大，有11m，读取该value值速度太慢，查询网上资料后都说把这个key-value拆分，再用pipeline或者multiGet查询，经过调研，如下：把这个key-value拆分成了46个key-value，然后再用pipeline或者multiGet查询，发现pipeline和multiGet确实可以批量查询多键值对，但是总速度跟之前单个键值对查询速度没有区别-.-
下面是redis表和pipeline以及multiGet的批量查询方法：

对应的redis表

     @SuppressWarnings({ "rawtypes", "unchecked" })
    public List executePipelined(Collection<String> keySet) {
        return redisTemplate.executePipelined(new SessionCallback<Object>() {
            @Override
            public <K, V> Object execute(RedisOperations<K, V> operations) throws DataAccessException {
                HashOperations hashOperations = operations.opsForHash();
                for (String key : keySet) {
                    hashOperations.entries(key);
                }
                return null;
            }
        });
    }

    @Test
    public void testPp(){
        Collection<String> keySet = new ArrayList<>();
        keySet.add("info_platform_test:7");
        List list = executePipelined(keySet);
    }

multiGet用法

public List<String> multiGetCaches(List<String> key){
        try{
            if (null != key && key.size() > 0) {
                Collection<String> collection = key;
                List<String> list = redisTemplate.opsForHash().multiGet("info_platform_test:7",collection);
                if (null != list && list.size() > 0) {
                    return list;
                } else {
                    return null;
                }
            }else {
                return null;
            }
        }catch (RedisConnectionFailureException e){
            return null;
        } catch (Exception e){
            return null;
        }
    }

    @Test
    public void multTest(){
        List<String> stringList = new ArrayList<>();
        for (int j=0; j<47; j++){
            stringList.add(j+"");
        }
        List<String> list = multiGetCaches(stringList);
    }