SQL中查询重复记录的几种方法

原创已于 2024-04-01 11:41:13 修改 · 3.7k 阅读

9 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#SQL重复记录查询的几种方法 #查询重复数据 #SQL #数据库

于 2020-01-09 07:02:42 首次发布

MySql 专栏收录该内容

40 篇文章

订阅专栏

1. 使用GROUP BY和HAVING子句：

通过使用GROUP BY子句对需要检查重复记录的字段进行分组，并使用HAVING子句筛选出出现次数大于1的分组。

SELECT column1, column2, ...
FROM table
GROUP BY column1, column2, ...
HAVING COUNT(*) > 1;

2. 使用子查询和EXISTS关键字：

通过使用子查询，检查表中是否存在与当前记录具有相同值的其他记录。

SELECT column1, column2, ...
FROM table t1
WHERE EXISTS (
    SELECT 1
    FROM table t2
    WHERE t1.column1 = t2.column1
      AND t1.column2 = t2.column2
      ...
      AND t1.id <> t2.id
);

3.使用窗口函数和CTE（公用表达式）：

使用窗口函数根据需要检查的字段进行分区，并计算每个分区中的记录数。然后使用CTE过滤出记录数大于1的分区

WITH cte AS (
    SELECT column1, column2, ..., COUNT(*) OVER (PARTITION BY column1, column2, ...) AS count
    FROM table
)
SELECT column1, column2, ...
FROM cte
WHERE count > 1;

4. 使用ROW_NUMBER函数和CTE：

使用ROW_NUMBER函数为表中的每个记录分配一个行号，并筛选出行号大于1的记录。

WITH cte AS (
    SELECT column1, column2, ..., ROW_NUMBER() OVER (PARTITION BY column1, column2, ... ORDER BY id) AS row_num
    FROM table
)
SELECT column1, column2, ...
FROM cte
WHERE row_num > 1;