多线程图片上传缺少部分图片,多线程上传图片失败,多线程上传。

多线程图片上传缺少部分图片

异常原因

你好! 由于业务需要,多本书的图片会通过本地服务上传至服务器,在一次大批量上传10本以上书籍的时候发现某几本书缺少几张图片。经过排查 ,发现是多线程的问题。改用线程池后仍然无效。
限制贴上部分代码

代码

加入同步关键字和睡眠机制仍然无效,加入线程池也无效。

  List<Page> pageList = new Vector<>();
            CountDownLatch countDownLatch = new CountDownLatch(fileNameList.size());
            int count = 0;
            for (String fileName : fileNameList) {
                ++count;
                log.info("本次上传的是第" + count + "张图片,图片名称为===> " + fileName);
                uploadExecutor.submit(() -> {
                    BufferedImage bufferedImage = null;
                    try {
                        UploadResult uploadResult = null;
                        for (int i = 0; i < 10; i++) {
                            //上传代码省略
                            if (uploadResult != null) break;
                        }
                        if (uploadResult == null || StringUtils.isEmpty(uploadResult.getUrl()) || uploadResult.getUrl().contains("error")) {
                            log.info("文件" + fileName + "上传失败");
                        }
                        bufferedImage = ImageIO.read(new File(folder + "/" + fileName));
                        int width = bufferedImage.getWidth();
                        int height = bufferedImage.getHeight();
                        Page page = new Page();
						省略

                        page.setPageName(fileName);
                        log.info("图片==> " + fileName + " 成功上传,成功地址为==> " + page.getPageUrl());
                        pageList.add(page);
                    } catch (Exception e) {
                        log.info("上传失败,原因为===》" + e.getMessage());
                        log.error("上传图片异常:" + e.getMessage());
                    } finally {
                        if (bufferedImage != null) {
                            bufferedImage.flush();
                        }
                        countDownLatch.countDown();

                    }
                });
                try {
                    //休眠50毫秒
                    Thread.sleep(50L);
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }
            }
            try {
                countDownLatch.await();
            } catch (InterruptedException e) {
                log.error("锁失败");
            }

最后排查出来是这一行代码的问题
bufferedImage = ImageIO.read(new File(folder + “/” + fileName));
这个ImageIO类是线程不安全的,过了这一行值就乱了。
最后加入判断,如果上传成功的数量和需要上传的数量不符合,线程就睡眠一秒,继续重试。
最后终于解决了,真是天坑啊。
但是任然不知道这个IO为啥不报错,异常处理的日志没有打印出来

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值