【sql】MySQL中去重处理的方法

news/2024/9/21 12:20:45 标签: sql, mysql, 数据库

在MySQL中,去重通常指的是从查询结果中删除重复的行。这可以通过多种方式实现,具体取决于你的需求。以下是一些常见的去重方法:

1. DISTINCT 关键字:

使用 DISTINCT 关键字可以返回唯一不同的值。

sql">SELECT DISTINCT column_name FROM table_name;

2. GROUP BY 子句:

使用 GROUP BY 子句可以对结果集进行分组,每个组只返回一条记录。

sql">SELECT column_name, COUNT(*)
FROM table_name
GROUP BY column_name;

3. 聚合函数:

使用聚合函数(如 MIN(), MAX(), SUM(), AVG() 等)也可以实现去重的效果,因为聚合函数会对每个组返回一个值。

sql">SELECT MIN(column_name) AS unique_column
FROM table_name
GROUP BY another_column;

4. 子查询:

使用子查询可以创建一个临时表,其中包含唯一的记录。

sql">SELECT *
FROM (
    SELECT DISTINCT column_name
    FROM table_name
) AS subquery;

5. 临时表:

创建一个临时表来存储去重后的结果。

sql">CREATE TEMPORARY TABLE temp_table AS
SELECT DISTINCT column_name
FROM table_name;

SELECT * FROM temp_table;
DROP TEMPORARY TABLE temp_table;

6. 窗口函数(MySQL 8.0+):

使用窗口函数 ROW_NUMBER(), RANK(), DENSE_RANK() 等可以为每个组分配一个唯一的行号。

sql">SELECT column_name
FROM (
    SELECT column_name, ROW_NUMBER() OVER (PARTITION BY column_name ORDER BY another_column) AS rn
    FROM table_name
) AS subquery
WHERE rn = 1;

7. 使用 GROUP_CONCAT()

如果你想要将重复的行合并成一个字符串,可以使用 GROUP_CONCAT()

sql">SELECT column_name, GROUP_CONCAT(another_column SEPARATOR ', ') AS concatenated_values
FROM table_name
GROUP BY column_name;

8.使用 DISTINCT ON(MySQL不支持,但适用于其他数据库如PostgreSQL):

在MySQL中没有 DISTINCT ON 语法,但这是其他数据库中去重的一种方法。

选择哪种方法取决于你的具体需求,比如你想要保留哪些列,是否需要考虑排序等。在实际应用中,可能需要结合使用多种方法来达到预期的效果。


http://www.niftyadmin.cn/n/5668778.html

相关文章

go语言Map详解

Map Go语言中提供的映射关系容器为map,其内部使用散列表(hash)实现 map是一种无序的基于key-value的数据结构,Go语言中的map是引用类型,必须初始化才能使用。 它提供了高效的查找、插入和删除操作,非常适…

【Webpack--013】SourceMap源码映射设置

🤓😍Sam9029的CSDN博客主页:Sam9029的博客_CSDN博客-前端领域博主 🐱‍🐉若此文你认为写的不错,不要吝啬你的赞扬,求收藏,求评论,求一个大大的赞!👍* &#x…

linux内核 devtmpfs介绍

文章目录 概要整体架构流程技术细节 概要 提示:这里可以添加技术概要 linux内核中 devtmpfs实现介绍 内核版本:5.10 Devtmpfs在Linux中是一个特殊的设备文件系统,主要用来linux内核中加速启动过程和管理设备节点。高版本的linux基本都是使用…

ThreadX源码:Cortex-A7的tx_thread_irq_nesting_start(嵌套中断开始动作).s汇编代码分析

0 参考资料 Cortex M3权威指南(中文).pdf(可以参考ARM指令集用法) 1 前言 tx_thread_irq_nesting_start.s是用来实现Cortex-A7 IRQ嵌套中断的开始函数实现的汇编文件。 2 源码分析 源码如下: 1  IRQ_DISABLE 0x80…

【裸机装机系列】11.kali(ubuntu)-优化-扩展root分区存储空间

如果你在安装分区的时候选择的是“guided-use entire disk and set up LVM”,那自动分配的root分区的空间很小,需要手动进行扩容。由于是采用lvm来进行分区的,扩容就相对来说简单很多。 可以通过缩小/home分区的LVM一些空闲空间,而…

Redis基础数据结构之 Sorted Set 有序集合 源码解读

目录标题 Sorted Set 是什么?Sorted Set 数据结构跳表(skiplist)跳表节点的结构定义跳表的定义跳表节点查询层数设置 Sorted Set 基本操作 Sorted Set 是什么? 有序集合(Sorted Set)是 Redis 中一种重要的数据类型,…

Python用TOPSIS熵权法重构粮食系统及期刊指标权重多属性决策MCDM研究|附数据代码...

原文链接:https://tecdat.cn/?p37724 在当今世界,粮食系统的稳定性至关重要。尽管现有的全球粮食系统在生产和分配方面表现出较高的效率,但仍存在大量人口遭受饥饿以及诸多粮食安全隐患。与此同时,在学术领域,准确评估…

window批处理脚本:将本地的三个文件通过SCP传输到Linux设备上

文件名send_file.bat: echo off setlocal:: 提示用户输入远程IP地址 set /p remoteIpAddressplease input IP::: 定义本地文件名 set "localFile1111" set "localFile2222" set "localFile3333":: 获取本地文件的完整路径 set "…