统计同个用户在多个平台的数据

公司的项目,数据存放在多个平台上,如下图所示:
在这里插入图片描述
现在需要每天定时将各个平台上的数据统计出来,,相同用户的数据进行合并,然后存放在一个库中例如上图的cash_loan_admin这个库。

说实话,我当时没什么思路,难道要将所有的数据库中的数据一个一个的取出来,然后再循环,那这样代码就冗余了。然后就再网上找找看,有咩有相类似的需求,然后翻到一篇文章给了我启示,然后一切做起来就非常容易了。

我最终的做法是这样的

①定义一个map,以用户名作为key,用户的数据作为value.
②查询never(一号)平台上当天的所有用户的数据,返回一个List集合
③遍历集合,将每个用户的信息都存放到map中
④利用for循环取出每个平台上的当天的所有用户的数据,核心代码如下。

//查询其余九个平台原始数据进行合并
for(int i=2;i<=10;i++) {
//切换数据库	
DataSourceContextHolder.setDbType(DataSourceContextHolder.DATA_SOURCE_NEVER+i);
//查询当天所有用户数据
List<RecruiterClearCount> rClearCounts=recruiterClearCountDao.queryAll(queryMap);
DataSourceContextHolder.clearDbType();
}

⑤每从一个平台查出数据后就遍历集合中的数据,然后判断map中是否存在该用户名的key(map的containsKey方法),存在的话,就取出用户的数据进行修改,然后重新放入map中,如果不存在,就直接以用户名作为key,用户数据作为value存入map中
⑥经过上面5步之后,我们的map中存放的数据就是所有平台当天的所有用户数据了。现在我们最终一步就是需要遍历这个map,然后根据用户名和日期去我们最终要存入的库查询,如果存在的话我们就删除或者更新,不存在的话我们就直接插入即可。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值