首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >删除MySQL中的重复行

问删除MySQL中的重复行
EN

Stack Overflow用户
提问于 2010-07-22 18:03:56
回答 26查看 448.1K关注 0票数 431

我有一张有以下字段的表格:

代码语言:javascript
复制
id (Unique)
url (Unique)
title
company
site_id

现在,我需要删除具有相同title, company and site_id的行。一种方法是使用下面的SQL和脚本(PHP):

代码语言:javascript
复制
SELECT title, site_id, location, id, count( * ) 
FROM jobs
GROUP BY site_id, company, title, location
HAVING count( * ) >1

运行此查询后,可以使用服务器端脚本删除重复项。

但是,我想知道这是否只能使用SQL查询。

EN

回答 26

Stack Overflow用户

回答已采纳

发布于 2010-07-22 18:24:05

一个非常简单的方法是在3列上添加一个UNIQUE索引。编写ALTER语句时,请包含IGNORE关键字。就像这样:

代码语言:javascript
复制
ALTER IGNORE TABLE jobs
ADD UNIQUE INDEX idx_name (site_id, title, company);

这将删除所有重复行。作为一个额外的好处,将来重复的INSERTs会出错。像往常一样,在运行这样的东西之前你可能想做个备份.

票数 654
EN

Stack Overflow用户

发布于 2014-08-08 15:20:38

如果不想更改列属性,则可以使用下面的查询。

由于您有一个具有唯一it的列(例如,auto_increment列),所以可以使用它删除重复项:

代码语言:javascript
复制
DELETE `a`
FROM
    `jobs` AS `a`,
    `jobs` AS `b`
WHERE
    -- IMPORTANT: Ensures one version remains
    -- Change "ID" to your unique column's name
    `a`.`ID` < `b`.`ID`

    -- Any duplicates you want to check for
    AND (`a`.`title` = `b`.`title` OR `a`.`title` IS NULL AND `b`.`title` IS NULL)
    AND (`a`.`company` = `b`.`company` OR `a`.`company` IS NULL AND `b`.`company` IS NULL)
    AND (`a`.`site_id` = `b`.`site_id` OR `a`.`site_id` IS NULL AND `b`.`site_id` IS NULL);

在MySQL中,您可以使用零安全等运算符 (又名“宇宙飞船操作员”)进一步简化它:

代码语言:javascript
复制
DELETE `a`
FROM
    `jobs` AS `a`,
    `jobs` AS `b`
WHERE
    -- IMPORTANT: Ensures one version remains
    -- Change "ID" to your unique column's name
    `a`.`ID` < `b`.`ID`

    -- Any duplicates you want to check for
    AND `a`.`title` <=> `b`.`title`
    AND `a`.`company` <=> `b`.`company`
    AND `a`.`site_id` <=> `b`.`site_id`;
票数 212
EN

Stack Overflow用户

发布于 2010-07-22 18:26:48

MySQL对引用要删除的表有限制。您可以使用临时表来解决这个问题,比如:

代码语言:javascript
复制
create temporary table tmpTable (id int);

insert  into tmpTable
        (id)
select  id
from    YourTable yt
where   exists
        (
        select  *
        from    YourTabe yt2
        where   yt2.title = yt.title
                and yt2.company = yt.company
                and yt2.site_id = yt.site_id
                and yt2.id > yt.id
        );

delete  
from    YourTable
where   ID in (select id from tmpTable);

来自Kostanos的评论中的建议:

上面唯一缓慢的查询是DELETE,如果您有一个非常大的数据库的话。这个查询可能会更快:

代码语言:javascript
复制
DELETE FROM YourTable USING YourTable, tmpTable WHERE YourTable.id=tmpTable.id
票数 82
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/3311903

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档