java的List集合去重总结

法一：使用List的contains方法

/**使用List集合contains方法循环遍历(有序)
 *
 * @param list
 * */
public static List removeDuplicationByContains(List<Integer> list) {
    List<Integer> newList =new ArrayList<>();
    for (int i=0;i<list.size();i++)
    {
        boolean isContains =newList.contains(list.get(i));
        if(!isContains){
            newList.add(list.get(i));
        }
    }
    list.clear();
    list.addAll(newList);
    return list;
}

法二：使用HashSet

/**使用HashSet实现List去重(无序)
 *
 * @param list
 * */
public static List removeDuplicationByHashSet(List<Integer> list) {
    HashSet set = new HashSet(list);
    //把List集合所有元素清空
    list.clear();
    //把HashSet对象添加至List集合
    list.addAll(set);
    return list;
}

法三：使用TreeSet

/**使用TreeSet实现List去重(有序)
 *
 * @param list
 * */
public static List removeDuplicationByTreeSet(List<Integer> list) {
    TreeSet set = new TreeSet(list);
    //把List集合所有元素清空
    list.clear();
    //把HashSet对象添加至List集合
    list.addAll(set);
    return list;
}

法四：使用java8新特性stream

/**使用java8新特性stream实现List去重(有序)
 *
 * @param list
 * */
public static List removeDuplicationByStream(List<Integer> list) {
    List newList = list.stream().distinct().collect(Collectors.toList());
    return newList;
}

各方法效率测试

public static void main(String args[]) {
    List<Integer> list1 = new ArrayList<>();
    List<Integer> list2 = new ArrayList<>();
    List<Integer> list3 = new ArrayList<>();
    List<Integer> list4 = new ArrayList<>();
    List<Integer> list5 = new ArrayList<>();
    Random random =new Random();
    for (int i = 0; i < 100000; i++) {
        int value =random.nextInt(500);
        list1.add(value);
        list2.add(value);
        list3.add(value);
        list4.add(value);
        list5.add(value);
    }
    long startTime ;
    long endTime;
    startTime = System.currentTimeMillis();
    removeDuplicationByHashSet(list1);
    endTime = System.currentTimeMillis();
    System.out.println("使用HashSet实现List去重时间:"+(endTime-startTime)+"毫秒");
    startTime = System.currentTimeMillis();
    removeDuplicationByTreeSet(list2);
    endTime = System.currentTimeMillis();
    System.out.println("使用TreeSet实现List去重时间:"+(endTime-startTime)+"毫秒");
    startTime = System.currentTimeMillis();
    removeDuplicationByStream(list3);
    endTime = System.currentTimeMillis();
    System.out.println("使用java8新特性stream实现List去重:"+(endTime-startTime)+"毫秒")：
    startTime = System.currentTimeMillis();
    removeDuplicationByContains(list5);
    endTime = System.currentTimeMillis();
    System.out.println("使用List集合contains方法循环遍历:"+(endTime-startTime)+"毫秒");

}

结果

使用HashSet实现List去重时间:40毫秒
使用TreeSet实现List去重时间:36毫秒
使用java8新特性stream实现List去重:78毫秒
使用两个for循环实现List去重:533毫秒
使用List集合contains方法循环遍历:40毫秒
更多测试结果
随机数在100范围内：
使用HashSet实现List去重时间:32毫秒
使用TreeSet实现List去重时间:40毫秒
使用java8新特性stream实现List去重:128毫秒
使用两个for循环实现List去重:693毫秒
使用List集合contains方法循环遍历:30毫秒
随机数在1000范围内：
使用HashSet实现List去重时间:34毫秒
使用TreeSet实现List去重时间:72毫秒
使用java8新特性stream实现List去重:125毫秒
使用两个for循环实现List去重:1063毫秒
使用List集合contains方法循环遍历:85毫秒
随机数在10000范围内：
使用HashSet实现List去重时间:51毫秒
使用TreeSet实现List去重时间:103毫秒
使用java8新特性stream实现List去重:201毫秒
使用两个for循环实现List去重:5448毫秒
使用List集合contains方法循环遍历:791毫秒

结论

无序HashSet，有序TreeSet

参考：https://juejin.cn/post/6894606364711059470