如何通过SQL批量删除重复数据

文章目录


前言

浅浅记录一下,工作问题。

今天在库中看到存在很多重复数据,本文将介绍怎么通过SQL语句批量删除重复数据的一种方式。


一、GROUP BY、HAVING是什么

我们先来了解一下GROUP BY,HAVING。
GROUP BY 是SQL语言中的一种聚合函数。从英文的字面意义上理解就是"根据(by)一定的规则进行分组(Group)";它的作用是通过一定的规则将一个数据集划分成若干个小的区域,然后针对若干个小区域进行数据处理。在SQL中,GROUP BY是SELECT语句的可选子句,用于根据一个或多个字段对查询结果进行分组,它减少了结果集中的行数。
HAVING通常用在SQL语句中,与GROUP BY子句一起使用,对分组的结果进行过滤。如果将WHERE关键字用于在聚合运算前过滤分组的话,那么HAVING关键字则用于在聚合运算后过滤分组。

简而言之,ROUP BY用于按照一个或多个字段对查询结果进行分组,HAVING则是对分组之后的数据进行再次过滤

二、编写SQL

1.查询重复数据

代码如下(示例):

c 复制代码
SELECT MIN( a.task_id ) id 
	FROM
		PLMS_T_D_TaskExecuteLog a 
	GROUP BY
		a.car_desc,
		a.direction,
		a.distance,
		a.log_begin_time,
		a.log_desc,
		a.log_status,
		a.mai_subName,
		a.person_str,
		a.weather 
HAVING
	COUNT ( * ) > 1

2.删除SQL

代码如下(示例):

c 复制代码
DELETE 
FROM
	TaskExecuteLog 
WHERE
	task_id IN (
	SELECT MIN( a.task_id ) id 
	FROM
		PLMS_T_D_TaskExecuteLog a 
	GROUP BY
		a.car_desc,
		a.direction,
		a.distance,
		a.log_begin_time,
		a.log_desc,
		a.log_status,
		a.mai_subName,
		a.person_str,
		a.weather 
HAVING
	COUNT ( * ) > 1)

总结

以上就我通过SQL批量删除数据的语句,在此欢迎各位同行分享其他方式。

相关推荐
xgc_java5 分钟前
在Java里把ONNX/OpenCV/FFmpeg跑稳:28篇bytedeco实战小册完整指南
java·opencv·ffmpeg
Lhappy嘻嘻9 分钟前
网络(四)|全网最细网络层原理:IP 协议、IP 地址分类、子网划分、路由转发、NAT 穿透详解
java·笔记·网络协议·计算机网络
倔强的石头_14 分钟前
SQL 语法全兼容,但结果就是不一样——国产化迁移里最难缠的九类隐患
数据库
大模型码小白23 分钟前
Milvus 架构设计:从向量索引到分布式检索,AI 原生存储引擎的内部机制
java·大数据·人工智能·分布式·深度学习·milvus
稚南城才子,乌衣巷风流24 分钟前
链表(Linked List):数据结构详解与实战应用
java
NWU_LK28 分钟前
【WebFlux】第二篇 —— Project Reactor 核心数据类型
java
三84431 分钟前
笔记:在同一个物理服务器上通过nginx的虚拟主机生成多个不同的web站点
java·前端·nginx
2501_932750261 小时前
Android 数据持久化解析
android·java
kobe_OKOK_1 小时前
django外键字段会自动在数据库字段后面加上_id
数据库·django·sqlite
NWU_LK2 小时前
【WebFlux】第三篇 —— 常用操作符与数据流转换
java