subList引起的java.util.ConcurrentModificationException原因解析

最近需要处理一份挺大的数据,因此想到用多线程,将文件数据读到list,然后切割成n份处理,结果报了ConcurrentModificationException,大概的代码如下:

 public void execute(ExecutorContext executorContext) {

        List<String> lists = Utils.readFile2List("list.txt");
        lists = lists.stream().map(a -> a.replace("\"", "")).collect(Collectors.toList());
        // 分成n份数据来跑
        int size = lists.size();
        int count = size / threadNum;
        int index = 0;
        poolExecutor = new ThreadPoolExecutor(threadNum, threadNum,
                0L, TimeUnit.MILLISECONDS,
                new LinkedBlockingQueue<Runnable>(threadNum),
                new ThreadPoolExecutor.CallerRunsPolicy());
        List<Future<Map<String, Set<String>>>> futures = new ArrayList<>();
        while (index < size) {
            // 需新建一个list,否则操作sublist修改数据后会导致和原list modCount不相等,从而报错
            List<String> subList = lists.subList(index, index + count > size? size: index+count);
            futures.add(poolExecutor.submit(new DealListCall(subList, index)));
            index+=count;
        }
        for(Future<Map<String, Set<String>>> future: futures) {
            try {
                Map<String, Set<String>> stringSetMap = future.get();
                writefileinfo("list1", stringSetMap.get("set1"));
                logger.info("index{}, list1{}", JsonUtils.objectToJson(stringSetMap.get("index")), JsonUtils
                        .objectToJson(stringSetMap.get("set1")));
            } catch (InterruptedException e) {
                e.printStackTrace();
            } catch (ExecutionException e) {
                e.printStackTrace();
            }
        }

    }

    private class DealListCall implements Callable<Map<String, Set<String>>> {

        private List<String> lists;
        private int index;

        public DealListCall(List<String> lists, int index) {
            this.lists = lists;
            this.index = index;
        }
        @Override
        public Map<String, Set<String>> call() throws Exception {
            Map<String, Set<String>> map = new HashMap<>();
            Set<String> set1 = new HashSet<>();
            for (int i = 0; i < 64; i++) {
                int size = lists.size();
                int index = 0;
                // 用set来保证去重
                Set<String> removelists = new HashSet<>();
                Set<String> result = new HashSet<>();
                while (index < size) {
                    long start = System.currentTimeMillis();
                    ...
                    index+=1000;
                    logger.info("当前i{}, index{}, 耗费时间为{}", i, index, System.currentTimeMillis() - start);
                }
                set1.addAll(result);
                lists.removeAll(removelists);
            }
            map.put("set1", set1);
            map.put("index", set);
            Thread.sleep(2000+index);
            return map;
        }
    }

    public Boolean writefileinfo(String path, Set<String> set) {
        FileSystemResource resource = new FileSystemResource(path);
        try {
            FileWriter fileWriter = (new FileWriter(resource.getFile(), true));
            for (String str : set) {
                fileWriter.write(str + "\n");
            }
            fileWriter.close();
        } catch (IOException e) {
            return false;
        }
        return true;
    }

运行后报了ConcurrentModificationException,然后在网上找了一下,原因是切割list时使用了subList方法,而subList方法返回的是原list中某段数据的视图,然后ArrayList$SubList.size方法,如果原List和SubList的modCount不相等就会报错,查看源代码如下:

public E set(int index, E e) {
    rangeCheck(index);
    checkForComodification();
    E oldValue = ArrayList.this.elementData(offset + index);
    ArrayList.this.elementData[offset + index] = e;
    return oldValue;
}
public E get(int index) {
    rangeCheck(index);
    checkForComodification();
    return ArrayList.this.elementData(offset + index);
}

private void checkForComodification() {
     if (ArrayList.this.modCount != this.modCount)
         throw new ConcurrentModificationException();
     }

解决办法是新建一个list对象来包装原来的list,即new ArrayList(list1.subList(0, list1.size()))

  • 2
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
这个问题是因为 `subList` 方法返回的是 `ArrayList$SubList` 类型,而不是 `ArrayList` 类型。你可以通过将它转换为 `ArrayList` 类型来解决这个问题。 下面是一个示例代码,展示如何将 `subList` 返回的 `ArrayList$SubList` 转换为 `ArrayList`: ```java import java.util.ArrayList; import java.util.Collections; import java.util.List; public class Main { public static void main(String[] args) { // 假设这是原始的脉搏波数据 ArrayList<Double> pulseData = new ArrayList<>(); pulseData.add(10.0); pulseData.add(20.0); pulseData.add(15.0); pulseData.add(25.0); pulseData.add(12.0); // 对脉搏波数据进行中值滤波 ArrayList<Double> filteredData = medianFilter(pulseData); // 打印滤波后的数据 for (Double data : filteredData) { System.out.println(data); } } public static ArrayList<Double> medianFilter(ArrayList<Double> data) { ArrayList<Double> filteredData = new ArrayList<>(); int windowSize = 3; // 滑动窗口大小 for (int i = 0; i < data.size(); i++) { int startIndex = Math.max(0, i - windowSize / 2); int endIndex = Math.min(data.size() - 1, i + windowSize / 2); // 获取滑动窗口内的数据,并转换为 ArrayList 类型 List<Double> window = new ArrayList<>(data.subList(startIndex, endIndex + 1)); // 对滑动窗口内的数据进行排序 Collections.sort(window); // 取中值作为滤波后的数据 double median = window.get(window.size() / 2); filteredData.add(median); } return filteredData; } } ``` 在上述代码中,我们将 `subList` 返回的结果使用 `ArrayList` 的构造函数转换为 `ArrayList` 类型,然后进行后续的处理。 请尝试使用这个方法,看看是否能够解决你的问题。如果你还有其他问题,请随时追问。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值