删除SQL（Postgres）中的情况不敏感的重复项

Question

我有一个PostgreSQL数据库，并且我正在尝试删除我表中的重复项的旧重复项（甚至仅获取ID），但只有那些是因为案例敏感性的，例如hello hello <<< /code>和Hello。

表非常大，我的嵌套查询需要很长时间，我想知道是否有一种更好，更有效的方法来一次进行查询，而不是将其分配到多个查询，因为其中有很多ID问题

SELECT * FROM some_table AS out
WHERE (SELECT count(*) FROM some_table AS in
    WHERE out.text != in.text 
    AND LOWER(in.text) = LOWER(out.text) 
    AND in.created_at > out.created_at) > 1

谢谢！

Answer 1

您可以尝试一下，

SELECT LOWER(text), ROW_NUMBER() OVER( PARTITION by LOWER(text) ORDER by created_at ) as rn
FROM some_table 

然后可以将rn列用作过滤器

Answer 2

要帮助此查询，请创建 nofollow noreferrer“ （文本）。在索引中包括create_at来帮助日期比较。

CREATE INDEX text_lower ON some_table(LOWER(text), created_at);

但是，没有您的数据，很难对此进行测试。