结果集重复记录怎么去掉

发布时间：2026-09-10 11:37:32 来源：亿速云阅读：100 作者：小樊栏目：数据库

“结果集重复记录怎么去掉”要分场景来说，下面按常见情况给你总结：

一、SQL 查询中去掉重复记录

1️⃣ 整行完全重复

SELECT DISTINCT *
FROM 表名;

2️⃣ 按某些字段去重（保留一条）

SELECT DISTINCT 字段1, 字段2
FROM 表名;

3️⃣ 按字段去重，但保留完整记录（推荐）

SELECT *
FROM (
  SELECT *,
         ROW_NUMBER() OVER (
           PARTITION BY 去重字段
           ORDER BY 时间字段 DESC
         ) rn
  FROM 表名
) t
WHERE rn = 1;

✅ 适用于：MySQL 8+、SQL Server、Oracle、PostgreSQL

二、代码中处理（Java / Python 等）

Java（List 去重）

List<Record> result = list.stream()
    .collect(Collectors.toMap(
        Record::getId,
        r -> r,
        (a, b) -> a
    ))
    .values()
    .stream()
    .toList();

Python

seen = set()
result = []
for item in data:
    if item['id'] not in seen:
        seen.add(item['id'])
        result.append(item)

三、Excel 中去掉重复

选中数据
【数据】→【删除重复值】
选择按哪些列判断重复

四、常见误区

❌ DISTINCT 只能整行或指定列去重
❌ GROUP BY 不等于“去重保留原行”
✅ 去重前一定要明确：按什么字段算重复？保留哪一条？

如果你能告诉我：

用的什么数据库（MySQL / Oracle / SQL Server）
重复是按哪个字段
是否要保留最新或某一条

我可以直接帮你写可用 SQL。

向AI问一下细节