java stream distinct根据list某个字段去重

项目场景:

java stream distinct根据list某个字段去重,普通List简单去重:

java 复制代码
import java.util.Arrays;
import java.util.List;
import java.util.stream.Collectors;

public class TestMain {
	public static void main(String[] args) {
        List<String> names = Arrays.asList("张三", "李四", "王五", "张三", "李四");
        
        // 使用Stream的distinct()方法进行去重操作
        List<String> distinctNames = names.stream().distinct().collect(Collectors.toList());

        System.out.println("原始列表:" + names);
        System.out.println("去重后的列表:" + distinctNames);
    }
}

很显然这种满足不了需求,我们List里的是实体对象,这里的是字符串。


前提基础:

首先创建了一个Student类,该类包含id、name、age三个字段,使用了注解@Data,我们想根据学生的name去重。

java 复制代码
import lombok.Data;

@Data
public class Student {
	
    public Student(Integer id, String name, Integer age) {
		this.id = id;
		this.name = name;
		this.age = age;
	}
    
	private Integer id;
    private String name;
    private Integer age;
}

解决方案:

一、Stream流 + TreeSet(推荐)

根据学生的name去重,原理:

1、首先使用Stream API对list进行转换成流,使用toCollection方法将流中的元素放入一个TreeSet集合中,通过TreeSet实现对name字段去重;

2、然后使用collectingAndThen方法将TreeSet集合转换成ArrayList集合;

用普通的list对象来操作需要分为两步操作,这里我们使用了Stream API提供的collect方法和Collectors类的两个静态方法toCollection和collectingAndThen来进行去重操作,不需要写繁琐的for循环,更加简洁高效。

java 复制代码
import java.util.ArrayList;
import java.util.Comparator;
import java.util.List;
import java.util.TreeSet;
import java.util.stream.Collectors;

public class TestMain {
	public static void main(String[] args) {
		List<Student> list = new ArrayList<>();
		list.add(new Student(1, "张三", 13));
		list.add(new Student(2, "李四", 14));
		list.add(new Student(3, "张三", 15));
		list.add(new Student(4, "王五", 16));
		list.add(new Student(5, "李四", 17));

		List<Student> distinctList = list.stream().collect(
		    Collectors.collectingAndThen(
		        Collectors.toCollection(() -> new TreeSet<>(Comparator.comparing(Student::getName))), ArrayList<Student>::new)
		);
		System.out.println(distinctList);
    }
}

二、Stream流 + toMap

根据学生的name去重,原理:

1、首先使用Stream API对list进行转换成流,使用Collectors.toMap方法将对象流转换为 Map,其中键是 name 字段,值是对象本身。当遇到重复的键时,我们使用合并函数 (p1, p2) -> p1 来选择保留哪个值;

2、然后通过提取 Map 的值集合,我们获得了去重后的结果。将集合转换成List集合;

用普通的list对象来操作需要分为两步操作,这里我们使用了Stream API来操作,不需要写繁琐的for循环,更加简洁高效。注意Map集合是无序的,所以最后打印的结果是无序的。

java 复制代码
import java.util.ArrayList;
import java.util.List;
import java.util.function.Function;
import java.util.stream.Collectors;

public class TestMain {
	public static void main(String[] args) {
		List<Student> list = new ArrayList<>();
		list.add(new Student(1, "张三", 13));
		list.add(new Student(2, "李四", 14));
		list.add(new Student(3, "张三", 15));
		list.add(new Student(4, "王五", 16));
		list.add(new Student(5, "李四", 17));

		List<Student> distinctList = list.stream()
		        .collect(Collectors.toMap(Student::getName, Function.identity(), (p1, p2) -> p1))
		        .values()
		        .stream()
		        .collect(Collectors.toList());
		
		System.out.println(distinctList);
    }
}

三、重写equals和hashCode

Student类在原来的基础上,重写equals和hashCode,根据学生的name去重

java 复制代码
import java.util.Objects;
import lombok.Data;

@Data
public class Student {
	
    public Student(Integer id, String name, Integer age) {
		this.id = id;
		this.name = name;
		this.age = age;
	}
    
	private Integer id;
    private String name;
    private Integer age;
    
    // 重写 equals 和 hashCode 方法
    @Override
    public boolean equals(Object o) {
        if (this == o) return true;
        if (o == null || getClass() != o.getClass()) return false;
        Student student = (Student) o;
        return Objects.equals(name, student.name);
    }

    @Override
    public int hashCode() {
        return Objects.hash(name);
    }
}
java 复制代码
import java.util.ArrayList;
import java.util.List;
import java.util.stream.Collectors;

public class TestMain {
	public static void main(String[] args) {
		List<Student> list = new ArrayList<>();
		list.add(new Student(1, "张三", 13));
		list.add(new Student(2, "李四", 14));
		list.add(new Student(3, "张三", 15));
		list.add(new Student(4, "王五", 16));
		list.add(new Student(5, "李四", 17));

		List<Student> distinctList = list.stream().distinct().collect(Collectors.toList());
		
		System.out.println(distinctList);
    }
}
相关推荐
智码看视界15 小时前
Day49-AI微服务化-将大模型能力封装为标准微服务
java·微服务·ai·架构·大模型·sse流式输出·ai中台
Nebula_g15 小时前
JavaSE基础语法:特殊类(特殊情景下的设计模式)
java·开发语言·设计模式
2401_8949155315 小时前
Geo 优化源码部署避坑指南:解决访问异常、定位失效、收录卡顿问题
java·服务器·后端·缓存·开源
Dovis(誓平步青云)15 小时前
《 固井工程软件 Cemsol 的数据管理与国产化适配实践》
android·java·开发语言·人工智能
大模型码小白15 小时前
AI安全前沿:AI大模型安全防护的前沿技术
java·网络·人工智能·python·深度学习·学习·安全
evans在进步16 小时前
LeetCode 34:在排序数组中查找元素的首尾位置——Java 两次二分查找详解
java·python·leetcode
@卓越俊逸_角立杰出@16 小时前
java实现Agent+ReAct demo(Spring Boot + Spring AI Alibaba ReAct Agent)
java·spring·react.js
看浪的路人16 小时前
第6讲:SQL 解析器
java·开发语言·数据库
weixin_4407841116 小时前
【OkHttp实现原理】
android·java·okhttp
a35354138216 小时前
C++项目如何架构优化
java·c++·架构