如何基于ID利用Java Streams移除List中重复对象

处理大量对象时，核心思路是先把要排除的ID提取到高效查找的集合中，再过滤目标列表，避免重复遍历带来的性能损耗。

步骤1：提取待排除的ID集合 #

先将listTwo里所有对象的ID提取出来，存入Set——因为Set的contains()方法时间复杂度为O(1)，远快于List的O(n)，非常适合处理大量数据场景：

// 假设你的对象类型为YourObject，getId()返回Long类型（可根据实际类型调整）
Set<Long> excludeIds = listTwo.stream()
    .map(YourObject::getId)
    // 若ID可能为null，需添加过滤避免空指针异常
    .filter(Objects::nonNull)
    .collect(Collectors.toSet());

步骤2：过滤listOne #

通过Stream过滤listOne，保留ID不在排除集合中的对象：

// 生成新的过滤后列表
List<YourObject> filteredList = listOne.stream()
    .filter(obj -> !excludeIds.contains(obj.getId()))
    .collect(Collectors.toList());

直接修改原listOne（可选） #

如果不需要生成新列表，想直接修改原listOne，可以结合Collection.removeIf()方法（内部基于流实现）：

listOne.removeIf(obj -> excludeIds.contains(obj.getId()));

注意事项 #

• 确保两个列表中对象的getId()返回类型一致（比如同为Long、String）
• 若存在ID为null的情况，必须在提取ID时添加filter(Objects::nonNull)，防止空指针
• 处理超大规模数据时，可尝试用parallelStream()替代stream()，但要保证对象操作是线程安全的

内容的提问来源于stack exchange，提问作者JavaLearner