如何使用 DISTINCT 关键字在 MySQL 中按条件去重字段？
最新回答
茴菿原点
2024-04-09 10:46:24
在MySQL中，使用DISTINCT关键字按条件去重字段时，需结合具体需求设计查询逻辑。以下是针对不同场景的解决方案：
1. 直接使用DISTINCT多字段组合若需按domain去重并区分“境内/境外”（假设存在isout字段标识），可直接组合字段：
SELECT DISTINCT domain, isout FROM url;- 原理：DISTINCT作用于所有选定字段的组合，确保结果中(domain, isout)唯一。
- 适用场景：需同时显示区分条件字段（如isout）时。
若需按domain去重且仅保留“境外”或“境内”的记录（假设通过loc字段判断），可采用以下方法：
方法一：UNION ALL合并结果-- 获取所有境外domain（去重）SELECT DISTINCT domain FROM url WHERE loc = '境外'UNION ALL-- 获取所有境内domain（去重）SELECT DISTINCT domain FROM url WHERE loc != '境外';- 原理：通过UNION ALL合并两个独立查询，分别处理“境外”和“境内”数据，确保各自去重。
- 注意：若某domain同时存在“境内”和“境外”记录，此查询会保留两条记录（因分别去重后合并）。
若需每个domain仅保留一条记录（如优先保留“境外”），可使用子查询：
SELECT DISTINCT domain FROM url u1WHERE loc = '境外' OR (loc != '境外' AND NOT EXISTS ( SELECT 1 FROM url u2 WHERE u2.domain = u1.domain AND u2.loc = '境外' ));- 原理：优先选择loc='境外'的记录，仅当不存在境外记录时才选择境内记录。
若需更灵活控制（如按时间排序取最新记录），可结合ROW_NUMBER()：
WITH ranked_urls AS ( SELECT domain, loc, ROW_NUMBER() OVER (PARTITION BY domain ORDER BY CASE WHEN loc = '境外' THEN 1 ELSE 2 END, create_time DESC) AS rn FROM url)SELECT domain, loc FROM ranked_urls WHERE rn = 1;- 优势：可自定义优先级（如境外优先、时间倒序）。
- 性能优化：对domain和条件字段（如loc）建立索引，避免全表扫描。
- 需求明确：确认是否需要保留区分字段（如isout）或仅需去重后的domain列表。
- 数据一致性：若存在跨条件重复（如同domain既有境内又有境外），需通过业务逻辑明确处理规则。
通过上述方法，可灵活实现MySQL中按条件去重的需求。根据实际表结构和业务规则选择最适合的方案。
热门标签
