SQL server 删除重复行

kowloon...2024-09-09 15:12

删除表中的重复记录需要谨慎操作，因为如果不正确地处理主键或唯一标识符，可能会导致数据丢失。通常，我们首先需要确定哪些列是用于判断记录是否重复的标准，然后根据这些标准来删除多余的记录。

以下是一个通用的SQL示例，用于删除基于特定列（假设为column1, column2, ..., columnN）的重复行，同时保留每组重复行中的一行（通常基于某种逻辑，如最早的记录或最大的ID）。

使用CTE和ROW_NUMBER()

假设我们有一个表my_table，我们想要基于column1和column2来删除重复行，我们可以使用公用表表达式（CTE）和ROW_NUMBER()窗口函数来实现：

sql 复制代码

WITH CTE AS (  
    SELECT  
        *,  
        ROW_NUMBER() OVER(PARTITION BY column1, column2 ORDER BY id) AS rn  -- 假设id是表中用于确定顺序的列  
    FROM  
        my_table  
)  
DELETE FROM CTE  
WHERE rn > 1;