MySQL 删除连续行中的重复项

Question

假设这个表：

ID ColA ColB
1   7    8
2   7    9
3   7    9
4   5    8
5   6    9
6   6    9
7   5    4

PK 是 ID 列。 现在，我想删除连续行中 ColA 和 ColB 的所有重复项。

在此示例中，第 2,3 行和 5,6 行包含重复项。 这些应被删除，以便保留较高的 ID。

输出应该是：

ID ColA ColB
1   7    8

3   7    9
4   5    8

6   6    9
7   5    4

How can this do with mySQL?

谢谢， 于尔根

Answer 1

SELECT 
    ID
FROM
    MyTable m1
WHERE
    0 < (SELECT 
            COUNT(*)
        FROM
            MyTable m2
        WHERE
            m2.ID = m1.ID - 1 AND 
            m2.ColA = m1.ColA AND 
            m2.ColB = m1.ColB)

然后你可以使用

delete from MyTable where ID in ...

查询。这样它肯定可以在任何版本中工作。

Answer 2

CREATE TEMPORARY TABLE duplicates (id int primary key)

INSERT INTO duplicates (id)
    SELECT t1.id
      FROM table t1
      join table t2 on t2.id = t1.id + 1
     WHERE t1.ColA = t2.ColA
       and t1.ColB = t2.ColB

-- SELECT * FROM duplicates --> are you happy with that? => delete
DELETE table
  FROM table
  join duplicates on table.id = duplicates.id

Answer 3

根据您拥有的记录数量，这可能不是最有效的：

SELECT (SELECT TOP 1 id FROM table WHERE colA = m.colA AND colB = m.colB ORDER BY id DESC) AS id, m.*
FROM (SELECT DISTINCT colA, colB
      FROM  table) m

可能存在语法错误，因为我通常使用 mssql，但想法应该类似。

Answer 4

我将第一个表称为“测试”。

首先创建一个表来保存 ColA 和 ColB 的所有相同组合：

create temporary table tmpTable (ColA int, ColB int);
insert into tmpTable select ColA,ColB from test group by ColA, ColB;

现在，为 ColA 和 ColB 的每个相同组合选择原始表中的最大 id。将其放入一个新表中（称为 idsToKeep，因为这些是我们不想删除的行）：

create temporary table idsToKeep (ID int);
insert into idsToKeep select (select max(ID) from test where test.ColA=tmpTable.ColA and test.ColB=tmpTable.ColB) from tmpTable;

最后，从原始表中删除所有不在 idsToKeep 表中的条目：

delete from test where ID <> all (select ID from idsToKeep);