Django 模型 - 如何在事后通过 PK 过滤掉重复值？

Question

我通过进行多个查询来构建 Django 模型对象的列表。 然后我想删除任何重复项（所有这些对象都具有 auto_increment int PK 的相同类型），但我不能使用 set() 因为它们不可散列。

有没有一种快速且简单的方法可以做到这一点？ 我正在考虑使用字典而不是以 id 作为键的列表。

Answer 1

一般来说，如果可能的话，最好将所有查询合并到一个查询中。 IE。

q = Model.objects.filter(Q(field1=f1)|Q(field2=f2))

如果

q1 = Models.object.filter(field1=f1)
q2 = Models.object.filter(field2=f2)

您的查询

q = Model.objects.filter(Q(field1=f1)|Q(field2=f2)).distinct()

确实无法使用单个命令执行，那么您将不得不求助于使用其他答案中推荐的字典或其他技术。 如果您在 SO 上发布了确切的查询，这可能会有所帮助，我们可以看看是否可以将其合并为单个查询。 根据我的经验，大多数查询都可以使用单个查询集来完成。

Answer 2

有没有一种快速、简单的方法可以做到这一点？ 我正在考虑使用字典而不是以 id 作为键的列表。

如果您被锁定在当前进行多个查询的结构中，这正是我会做的。 然后一个简单的 dictionary.values() 将返回您的列表。

如果您有更多的灵活性，为什么不使用 Q 对象呢？ 无需实际进行查询，而是将每个查询存储在 Q 对象中，并使用按位或 (“|”) 来执行单个查询。 这将实现您的目标并节省数据库点击量。

Django Q 对象

Answer 3

如果将 __hash__ 函数添加到模型定义中，以便它返回 id，则可以使用集合（假设这不会干扰您应用中可能具有的其他哈希行为）：

class MyModel(models.Model):

    def __hash__(self):
        return self.pk

Answer 4

如果顺序不重要，请使用字典。

Answer 5

删除“重复项”取决于您如何定义“重复项”。

如果您希望每一列（PK 除外）都匹配，那就很麻烦了——需要进行大量的比较。

另一方面，如果您有一些“自然键”列（或短列集），那么您可以轻松查询和删除它们。

master = MyModel.objects.get( id=theMasterKey )
dups = MyModel.objects.filter( fld1=master.fld1, fld2=master.fld2 )
dups.all().delete()

如果您可以识别一些较短的关键字段集来进行重复识别，则效果非常好。

---

编辑

如果模型对象尚未保存到数据库中，您可以在这些键的元组上创建字典。

unique = {}
...
key = (anObject.fld1,anObject.fld2)
if key not in unique:
    unique[key]= anObject

Answer 6

我用这个：

dict(zip(map(lambda x: x.pk,items),items)).values()