![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
邮乐工作记录
java-wfr
有大局观,善于分析和解决问题
展开
-
2021-02-22 2.5亿级表数据java处理
思路: 1、一次拿所有数据,sql性能会很慢,JVM内存也不够用 2、可以按天每次处理500条解决sql性能,每次修改1笔及时释放栈帧内存防止内存溢出 处理逻辑:第一个while按天处理,第二个while取当天的500笔未处理数据 public void updateAccountJournal(){ String startDate = "2018-01-01"; String endDate = "2021-02-21"; try { while(true){原创 2021-02-22 17:53:54 · 202 阅读 · 0 评论 -
2021-02-20 下载中心kafka堵塞的问题
下载中心kafka堵塞的问题 前段时间总是收到kafka报警(堵塞100条以上),然后看kafka配置中看了下如下: 查看日志发现主要有一下2方面的问题: 1、几天之前的查询线程卡顿着无法结束,年底财务核账查询范围太大,2.5亿级大表关联可想而知 解决办法: a、设置页面端查询最多为一个月 b、设置数据库最大连接时间 2、java.outofmemoryerror 解决过程: 观察发现,服务器175.151总是会堵塞,而且服务器175.233处理的数据笔服务器175.151处理...原创 2021-02-20 15:04:02 · 150 阅读 · 0 评论