MSSQL重复查询及去重方法总结

1. MSSQL重复查询方法

MSSQL数据查询过程中，经常需要搜索重复数据。MSSQL中提供了多种针对重复数据的查询方法。

1.1. 使用GROUP BY和HAVING语句

可以使用GROUP BY语句来将重复数据分组，使用HAVING语句来筛选出符合条件的分组。

SELECT column1, column2, COUNT(*)
FROM table
GROUP BY column1, column2
HAVING COUNT(*) > 1

以上代码将返回table表中，column1和column2有相同值的记录组成的分组，并且每个分组中的记录数量大于1。

1.2. 使用DISTINCT和INNER JOIN语句

可以使用DISTINCT关键字来去除重复数据，但是这种方法会使查询效率变得低下。

可以通过内部连接INNER JOIN，将表中具有重复值得列链接起来。

SELECT DISTINCT a.column1, a.column2
FROM table a
INNER JOIN (
    SELECT column1, column2
    FROM table
    GROUP BY column1, column2
    HAVING COUNT(*) > 1) b ON a.column1=b.column1 and a.column2=b.column2

以上代码将返回table表中，column1和column2有相同值的记录，只保留一条记录。

2. MSSQL去重方法

在查询数据时，需要去除重复数据，可以使用以下方法进行去重。

2.1. 使用DISTINCT关键字

DISTINCT关键字用于去除查询结果中的重复记录。

SELECT DISTINCT column1, column2
FROM table

以上代码将从table表中选择column1和column2列，并去除其中的重复记录。

2.2. 使用子查询

可以使用子查询先查询出重复数据，并在外层查询中去除重复数据。

SELECT *
FROM (SELECT column1, column2, COUNT(*) as cnt
      FROM table
      GROUP BY column1, column2) tmp
WHERE tmp.cnt=1

以上代码将从table表中选择column1和column2列，对这两列的记录进行分组。同时，查询记录在各组中的数量，并将结果存入临时表中。最后，根据临时表中数量为1的记录，得到去重后的结果。

2.3. 使用ROW_NUMBER函数

可以使用ROW_NUMBER函数将每个记录进行编号，然后只返回编号为1的记录，实现去重。

WITH cte AS (
    SELECT column1, column2, ROW_NUMBER() OVER (PARTITION BY column1, column2 ORDER BY column1) as rn
    FROM table
)
SELECT column1, column2
FROM cte
WHERE rn=1

以上代码利用WINDOW函数和CTE(Common Table Expression)语法，将结果进行编号，并保留编号为1的记录。

以上为MSSQL中重复查询和去重的方法，可以根据实际需要选择不同的方式进行查询和去重。