本文章是在公众号 java版web项目 上看到的，转载记录一下免得以后找不到了，可能会对部分格式和内容稍作修改，侵删。
原作者：多纤果冻
blog.csdn.net/qq_37939251/article/details/90713643

以下介绍五种不同的方法去除 Java 中ArrayList中的重复数据。

使用 LinkedHashSet 删除 arraylist 中的重复数据

LinkedHashSet 是在一个 ArrayList 删除重复数据的最佳方法。LinkedHashSet 在内部完成两件事：

• 删除重复数据
• 保持添加到其中的数据的顺序

Java 示例使用 LinkedHashSet 删除 arraylist 中的重复项。在给定的示例中，numbersList 是包含整数的 arraylist，其中一些是重复的数字。

例如，我们将重复的列表添加到 LinkedHashSet，然后将内容返回到列表中。结果 arraylist 没有重复的整数。

import java.util.ArrayList;
import java.util.Arrays;
import java.util.LinkedHashSet;

public class ListTest {
    public static void main(String[] args) {
        ArrayList<Integer> numbersList = new ArrayList<>(Arrays.asList(1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8));
        System.out.println(numbersList);

        LinkedHashSet<Integer> hashSet = new LinkedHashSet<>(numbersList);
        ArrayList<Integer> listWithoutDuplicates = new ArrayList<>(hashSet);
        System.out.println(listWithoutDuplicates);
    }
}

输出结果：

[1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8]
[1, 2, 3, 4, 5, 6, 7, 8]

使用 java8 新特性 stream 进行 List 去重

要从 arraylist 中删除重复项，我们也可以使用 java 8 stream api，使用 steam 的 distinct() 方法返回一个由不同数据组成的流，通过对象的 equals() 方法进行比较，在不使用 Set 的情况下从 java 中的 arraylist 中删除重复项。

使用 Collectors.toList() 收集所有区域数据 List。

import java.util.ArrayList;
import java.util.Arrays;
import java.util.List;
import java.util.stream.Collectors;

public class ListTest {
    public static void main(String[] args) {
        ArrayList<Integer> numbersList = new ArrayList<>(Arrays.asList(1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8));
        System.out.println(numbersList);

        List<Integer> collect = numbersList.stream().distinct().collect(Collectors.toList());
        System.out.println(collect);
    }
}

输出结果：

[1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8]
[1, 2, 3, 4, 5, 6, 7, 8]

利用 HashSet 不能添加重复数据的特性

由于 HashSet 不能保证添加顺序，所以只能作为判断条件保证顺序。

import java.util.ArrayList;
import java.util.Arrays;
import java.util.HashSet;
import java.util.List;

public class ListTest {
    public static void main(String[] args) {
        ArrayList<Integer> numbersList = new ArrayList<>(Arrays.asList(1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8));
        System.out.println(numbersList);

        removeDuplicate(numbersList);
        System.out.println(numbersList);
    }

    private static void removeDuplicate(List<Integer> list) {
        HashSet<Integer> set = new HashSet<>(list.size());
        List<Integer> result = new ArrayList<>(list.size());
        for (Integer integer : list) {
            if (set.add(integer)) {
                result.add(integer);
            }
        }
        list.clear();
        list.addAll(result);
    }
}

输出结果：

[1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8]
[1, 2, 3, 4, 5, 6, 7, 8]

利用 List 的 contains 方法循环遍历

import java.util.ArrayList;
import java.util.Arrays;
import java.util.List;

public class ListTest {
    public static void main(String[] args) {
        ArrayList<Integer> numbersList = new ArrayList<>(Arrays.asList(1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8));
        System.out.println(numbersList);

        removeDuplicate(numbersList);
        System.out.println(numbersList);
    }

    private static void removeDuplicate(List<Integer> list) {
        List<Integer> result = new ArrayList<>(list.size());
        for (Integer integer : list) {
            if (!result.contains(integer)) {
                result.add(integer);
            }
        }
        list.clear();
        list.addAll(result);
    }
}

输出结果：

[1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8]
[1, 2, 3, 4, 5, 6, 7, 8]

双重 for 循环去重

import java.util.ArrayList;
import java.util.Arrays;
import java.util.List;

public class ListTest {
    public static void main(String[] args) {
        ArrayList<Integer> numbersList = new ArrayList<>(Arrays.asList(1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8));
        System.out.println(numbersList);

        removeDuplicate(numbersList);
        System.out.println(numbersList);
    }

    private static void removeDuplicate(List<Integer> list) {
        for (int i = 0; i < list.size(); i++) {
            for (int j = 0; j < list.size(); j++) {
                if (i != j && list.get(i).equals(list.get(j))) {
                    list.remove(list.get(j));
                }
            }
        }
    }
}

输出结果：

[1, 1, 2, 3, 3, 3, 4, 5, 6, 6, 6, 7, 8]
[1, 2, 3, 4, 5, 6, 7, 8]