解决bitmap做每日统计，offset偏移量过大，导致内存占用过大的问题思路

最新推荐文章于 2024-06-25 00:15:00 发布

雪中鱼01

最新推荐文章于 2024-06-25 00:15:00 发布

阅读量4.7k

点赞数

分类专栏： redis java 文章标签： redis java

本文链接：https://blog.csdn.net/songkai558919/article/details/104775248

版权

本文探讨如何解决使用Redis Bitmap进行每日统计时，由于offset偏移量过大导致的内存占用问题。通过将每日的第一个ID设为被减量，使offset从1开始，显著降低内存消耗。同时，利用Guava Cache缓存每日第一个ID以进一步优化。

摘要由CSDN通过智能技术生成

需求：使用redis的bitmap做每日统计

解决思路：使用每天的第一个id作为被减量，这样每天的offset(偏移量)就从1开始，大幅有效的缩减了内存的占用量！

//bitmap的偏移量offset生产,offset越大，占用内存越多，所以以每日第一个id作为minid，作为被减数
//使用guava cache缓存机制获取最小id,设置过期时间为每一天，每天清空一次
private LoadingCache<String, Integer> minId = CacheBuilder.newBuilder().expireAfterWrite(1L, TimeUnit.DAYS).build(new CacheLoader<String, Integer>() {
    @Override
    public Integer load(String s) throws Exception {
      Date date = LocalDate.parse(StringUtils.substringAfter(s, "@")).toDate();
      if (ACTIVE_COUNTER.startsWith(s)) {
        LoginLog loginLog = loginLogRepository.getTopByLoginTimeBeforeOrderByIdDesc(date);
        if (loginLog != null) {
          return loginLog.getId();
        }
      } else if (PLAYED_COUNTER.startsWith(s)) {
        ViewHistory viewHistory = viewHistoryRepository.getTopByViewtimeBeforeOrderByIdDesc(da