对一次生产环境产生OOM的记录，结论：除非在自己完全有把握的情况下，否则不要偷懒查询无用字段

明快de玄米61

已于 2022-07-27 22:25:40 修改

阅读量548

点赞数

分类专栏： java学习之路文章标签： java 数据库开发语言

于 2022-07-27 22:20:36 首次发布

本文链接：https://blog.csdn.net/qq_42449963/article/details/126023169

版权

java学习之路专栏收录该内容

731 篇文章 58 订阅

订阅专栏

1、背景

今天下班的时候看到公司微信群里技术总监发的消息，内容是由于代码执行导致公司网站宕机，然后他让网站部门老大立即查找后台日志中对应的bug来源，我一看之前参与过这个项目，这是我写的日志信息，然后问题原因是从数据库中查询的对象集合太大，直接把内存给撑爆了，据说达到了20G，然后网站就宕机了

2、伪代码

本次使用下面伪代码说明代码逻辑

public class Test {

    // 模拟信息数据库
    private static List<A> dataList = new ArrayList<>();

    static {
        imitateMysql();
    }

    /**
     * 模拟分页输出数据
     */
    public static void main(String[] args) {
        // 总数据量
        int total = dataList.size();
        System.out.println("》》》》》》待处理数据总量：" + total + "；当前时间：" + DateUtil.now(DateUtil.DEFAULT_DATE_FORMAT));
        // 页面容量
        int pageSize = 100;
        // 总页码
        int totalPage = total % pageSize == 0 ? total / pageSize : total / pageSize + 1;
        // 分页处理数据
        for (int currentPage = 1; currentPage <= totalPage; currentPage++) {
            List<A> pageList = page(currentPage, pageSize);
            for (A entity : pageList) {
                indexData(entity.getId());
            }
            // 回收资源
            pageList = null;
        }
        System.out.println("》》》》》》所有数据都已经处理完毕");
    }

    /**
     * 生成模拟数据库数据
     */
    private static void imitateMysql() {
        for (int i = 0; i < 210000; i++) {
            A a = new A();
            a.setId(UUIDUtil.create().toString().replace("-", ""));
            a.setContent("自行想象此处存在大量文本");
            dataList.add(a);
        }
    }

    /**
     * 根据数据id索引数据到Elasticsearch，此处不再模拟
     * @param id 数据id
     */
    private static void indexData(String id) {
        // 根据数据id查询数据

        // 索引数据到Elasticsearch
        System.out.println("索引数据到Elasticsearch完成，id = " + id);
    }

    /**
     * 模拟分页获取数据
     * @param currentPage 当前页码
     * @param pageSize 页面容量
     * @return
     */
    private static List<A> page(int currentPage, int pageSize) {
        List<A> pageList = new ArrayList<>(pageSize);
        int start = (currentPage - 1) * pageSize;
        int end = start + pageSize - 1;
        for (int i = 0; i < dataList.size(); i++) {
            if (i >= start && i <= end) {
                pageList.add(dataList.get(i));
            }
        }
        return pageList;
    }
}