深入了解Java Stream中的distinct()方法:按一个或多个指定对象字段进行去重

深入了解Java Stream中的distinct()方法:按一个或多个指定对象字段进行去重

在Java编程中,Stream API为我们提供了丰富的操作方法来处理集合数据。其中,distinct()方法是一种常用的方法,用于去除Stream中的重复元素。然而,有时我们可能需要按照对象的一个或多个字段进行去重。本文将探讨如何利用Java Stream中的distinct()方法按照指定对象字段进行去重,并介绍其他几种实现去重的方法。

1. Java Stream中的distinct()方法

distinct()方法是Stream API中的一个中间操作,它返回一个去除了重复元素的新Stream。默认情况下,它使用对象的equals()方法来判断元素是否相等。但是,如果我们需要按照对象的特定字段来进行去重,就需要结合使用distinct()方法和自定义比较器。

1.1. 按照单个字段进行去重

假设我们有一个Person类,其中包含idname两个字段。我们想要按照id字段对Person对象进行去重,可以按照以下步骤操作:

java 复制代码
List<Person> people = // 获取Person对象的集合

List<Person> uniquePeople = people.stream()
                                  .filter(distinctByKey(Person::getId))
                                  .collect(Collectors.toList());

// 自定义去重比较器
public static <T> Predicate<T> distinctByKey(Function<? super T, Object> keyExtractor) {
    Map<Object, Boolean> seen = new ConcurrentHashMap<>();
    return t -> seen.putIfAbsent(keyExtractor.apply(t), Boolean.TRUE) == null;
}
1.2. 按照多个字段进行去重

如果我们需要按照多个字段进行去重,可以稍作修改:

java 复制代码
List<Person> uniquePeople = people.stream()
                                  .filter(distinctByKeys(p -> Arrays.asList(p.getId(), p.getName())))
                                  .collect(Collectors.toList());

// 自定义多字段去重比较器
public static <T> Predicate<T> distinctByKeys(Function<? super T, ? extends List<?>> keyExtractors) {
    Map<List<?>, Boolean> seen = new ConcurrentHashMap<>();
    return t -> {
        List<?> keys = keyExtractors.apply(t);
        return seen.putIfAbsent(keys, Boolean.TRUE) == null;
    };
}
2. 其他去重方法

除了使用Java Stream中的distinct()方法结合自定义比较器外,还有其他几种去重方法:

2.1. 利用集合类实现去重

利用HashSetTreeSet来存储不重复的元素。

java 复制代码
List<Person> people = // 获取Person对象的集合

Set<Person> uniquePeople = new HashSet<>(people); // 或者 TreeSet<Person>(Comparator.comparing(Person::getId))
List<Person> uniqueList = new ArrayList<>(uniquePeople);
2.2. 使用第三方库进行去重

使用Google Guava库的Streams类进行去重操作。

java 复制代码
import com.google.common.collect.Streams;

List<Person> people = // 获取Person对象的集合

List<Person> uniquePeople = Streams.stream(people)
                                   .distinct()
                                   .collect(Collectors.toList());
2.3. 利用Java 8的新特性进行去重

利用Collectors.toMap()方法结合mergeFunction来实现去重。

java 复制代码
List<Person> people = // 获取Person对象的集合

List<Person> uniquePeople = new ArrayList<>(people.stream()
                                                    .collect(Collectors.toMap(Person::getId, Function.identity(), (existing, replacement) -> existing))
                                                    .values());
3. 总结

通过本文的介绍,我们深入了解了Java Stream中的distinct()方法,并探讨了如何按照一个或多个指定对象字段进行去重。除了distinct()方法外,我们还介绍了利用集合类、第三方库以及Java 8的新特性来实现去重的方法。每种方法都有其适用的场景和优缺点,开发者可以根据具体情况选择合适的方法来进行去重。希望本文能够帮助你更好地理解和应用Java中的去重技术。

相关推荐
圆山猫40 分钟前
[Virtualization](四):Linux KVM/RISC-V 的 vCPU 运行路径
java·linux·risc-v
笨鸟先飞,勤能补拙1 小时前
AI 赋能网络安全:技术全景、成熟度评估与实战案例
人工智能·python·安全·web安全·网络安全·sqlite·github
微学AI1 小时前
一根针指向所有方向:挂谷猜想对 LLM Agent 技能-记忆架构的启示
开发语言·人工智能·架构·挂谷猜想
城管不管1 小时前
ReAct、Plan-and-Execute、Reflection 三大智能 Agent 范式核心区别
java·人工智能·算法·spring·ai·动态规划
IT小白杨1 小时前
从环境制备到自动化工作流:多账号运营的工程化架构拆解
java·经验分享·自动化·安全架构·指纹浏览器
长和信泰光伏储能2 小时前
京津冀光伏发电:绿色能源的未来之路
python·能源
豆瓣鸡2 小时前
算法日记 - Day3
java·开发语言·算法
浦信仿真大讲堂2 小时前
从重复操作到自动化闭环:如何让 CST 与 Python 真正协同起来
python·自动化·cst·仿真软件·达索软件
萧瑟余晖2 小时前
Java深入解析篇九之NIO详解
java·网络·nio
韭菜炒鸡肝天2 小时前
VTK开发笔记(一):VTK介绍,Qt..+VSx+VTK.编译
开发语言·笔记·qt