删除重复数据保留最大值mysql

原创

mob64ca12d52440 2024-09-21 07:02:42 ©著作权

©著作权归作者所有：来自51CTO博客作者mob64ca12d52440的原创作品，请联系作者获取转载授权，否则将追究法律责任

如何在 MySQL 中删除重复数据并保留最大值

在实际开发中，我们经常会遇到需要处理重复数据的情况。本文将详细介绍如何在 MySQL 中删除重复的数据，并保留最大值的步骤。通过对整个过程的理解，您将能够更好地掌握数据去重的技巧。

整体流程

在开始之前，我们可以先看一下整个流程，方便我们更好地理解每一步的意义。以下是处理数据的步骤：

步骤	描述
1	创建示例数据表并插入示例数据
2	查询重复记录并找出保留条件
3	使用 DELETE 和子查询删除重复数据
4	验证数据结果

1. 创建数据表和插入示例数据

首先，我们需要创建一个数据表来存储我们的示例数据。在这个例子中，我们将创建一个叫 products 的表，包含 id, name, 和 price 字段。

CREATE TABLE products (
    id INT PRIMARY KEY AUTO_INCREMENT,
    name VARCHAR(50),
    price DECIMAL(10, 2)
);

接下来，我们插入一些示例数据，包括重复的记录和不同的价格：

INSERT INTO products (name, price) VALUES
('Product A', 10.00),
('Product A', 15.00),
('Product B', 20.00),
('Product B', 15.00),
('Product C', 30.00);

2. 查询重复记录并找出保留条件

在删除重复记录之前，我们需要知道哪些记录是重复的，以及我们希望保留的记录是哪个。在我们的例子中，我们希望保留每个 name 的最大 price。

SELECT name, MAX(price) AS max_price
FROM products
GROUP BY name;

以上 SQL 语句会返回每个产品名及其对应的最大价格。

3. 使用 DELETE 和子查询删除重复数据

接下来，我们将用 DELETE 语句来移除重复记录。我们可以通过使用子查询来查找并删除重复数据。以下是完整的 SQL 语句：

DELETE FROM products
WHERE id NOT IN (
    SELECT * FROM (
        SELECT MIN(id) AS id
        FROM products
        GROUP BY name, price
        HAVING price = MAX(price)
    ) AS temp
);

代码解释：

DELETE FROM products: 告诉数据库我们要删除 products 表中的记录。
WHERE id NOT IN (...): 这个部分将决定哪些记录应该被删除，即不在子查询结果集中的记录。
SELECT MIN(id) AS id...: 这个子查询会返回每个产品组中以最小ID为标识的记录，确保我们能保留一条记录。
HAVING price = MAX(price): 这个语句确保了我们只保留最大价格对应的记录。

4. 验证数据结果

最后，我们可以查询 products 表，确认我们已经成功删除了重复的数据，只保留了最大值。

SELECT * FROM products;

通过执行这个查询，您应该能看到每个产品只保留一条记录，且它们的价格都是最大值。

ERD 图示

接下来，我将用 mermaid 的 erDiagram 语法展示我们的数据表关系如下：

erDiagram
    products {
        INT id PK "产品唯一标识"
        VARCHAR name "产品名称"
        DECIMAL price "产品价格"
    }

旅行图示

在整个过程中我们实际上经历了一个数据处理的旅程。以下是整个过程的旅程图示：

journey
    title 数据去重旅程
    section 创建数据表
      创建表: 5: 产品表
      插入数据: 5: 示例产品数据
    section 查询最大值
      查询最大价格: 5: 计算每个产品的最大价格
    section 删除重复数据
      删除多余记录: 5: 通过删除语句去除重复
    section 验证结果
      查询结果: 5: 确认数据去重成功