SQL中的去重

SQL中的去重

1. Distinct去重

说明 :DISTINCT 关键字用于返回唯一不同的值,一般放在查询语句中的第一个字段前使用。

DISTINCT会将NULL值也看做成一个不同的值。

DISTINCT去重

假如有一张员工表:

需要获取所有不重复的员工薪资和年龄的组合,如下编写SQL即可

sql 复制代码
SELECT DISTINCT age,salary
FROM Employee

结果:

2. Group By去重

GROUP BY也可以达到类似的效果

sql 复制代码
SELECT age,salary
FROM Employee
GROUP BY age,salary

不过使用GROUP BY还可以实现聚合的效果,可以联合聚合函数一起使用。

还是上面的员工表,我需要获取每个部门的最高工资的人

sql 复制代码
-- 使用JOIN连表
SELECT e.department_id, e.name, e.salary
FROM Employee e
JOIN (
    SELECT department_id, MAX(salary) AS max_salary
    FROM Employee
    GROUP BY department_id
) AS max_salaries
ON e.department_id = max_salaries.department_id
   AND e.salary = max_salaries.max_salary;
-- 使用EXISTS条件判断
SELECT e.department_id, e.name, e.salary
FROM Employee e
WHERE EXISTS
(
    SELECT 1
    FROM (
        SELECT department_id, MAX(salary) AS salary
        FROM Employee
        GROUP BY department_id
    ) AS m 
		WHERE m.department_id = e.department_id AND m.salary = e.salary
);

3. 唯一索引限制

可以创建一个唯一索引,用来在源头上控制重复数据的插入

sql 复制代码
CREATE UNIQUE INDEX index_name  ON Employee(age,salary)
相关推荐
devpotato3 分钟前
Java 批量并发请求:从“能并发“到“结果按完成顺序可用“的三种写法与选型
java
九月要晚安18 分钟前
达梦DW与AFC对比
数据库
实战派K8S&DB27 分钟前
如何在内网配置 TiDB 数据库 Agent
数据库·人工智能·分布式·tidb
实战派K8S&DB33 分钟前
《基于 Dify + FastAPI + PyTiDB 搭建大模型驱动的 TiDB 智能运维 Agent》
运维·数据库·分布式·云原生·tidb·fastapi
SelectDB39 分钟前
Apache Doris 5.0 年度版本前瞻(一):构建统一的多模湖仓实时分析平台
大数据·数据库·数据分析
苏生Susheng1 小时前
【软件实施】Linux企业运维常用命令手册
java·linux·运维·服务器·springboot·springcloud·软件实施
想要成为老金高手1 小时前
Kubernetes 调度器详解:从 nodeName 到污点容忍
java·容器·kubernetes
吴长建先生重名了1 小时前
ElasticSearch 检索系统性能优化实战:基准测试
java
小白学大数据1 小时前
超简单:用 Python 让 Excel 飞起来:用 openpyxl 把重复报表整理交给脚本
开发语言·数据库·python·excel
西索斯coding1 小时前
doubao-seed-2.1-turbo 调用一直 401 怎么办?pro 版同样的 Key 却正常——5 分钟排查定位指南
java·服务器·数据库·ai