随机生成 MySQL 行时确保字段唯一

Question

我正在生成大约 100,000 行随机数据，大约有 10 列，并且我需要所有值都是唯一的。

我能想到的唯一可靠的方法是对每个随机生成进行查询，以确保它尚不存在，但这会增加数十万个查询。另一种选择是在表上创建一个 UNIQUE 约束，但是我需要有某种方法来计算有多少重复项失败，以便我可以重新创建这些行（我需要知道我将生成完全相同数量的随机行）按照指定），或者在插入失败时使用新一代重试。有办法做到这一点吗？或者我是否错过了其他一些方法？

Answer 1

我应该在 python 中生成一个列表中的随机数。
然后，使用 set 来获取唯一值。

l = [1,5,5,4,5,4,8,9,2]

set(l)

set([1, 2, 4, 5, 8, 9])

现在，您可以生成 200.000 个数字以获得至少 100.000 个唯一的数字，然后截断列表，等等。

---

我尝试了这个：

import random
l = []
for i in range (200000):
    l.append (random.random())
print len(set(l))

它给了我一组长度为 200.000 的数据。生成的随机数中没有重复项！

Answer 2

您在列中填充什么类型的数据？它必须遵循任何特定格式吗？

无论数据格式如何，我都会离线生成所有数据，然后将其一次性插入数据库中。

例如：

from base64 import b64encode
from random import shuffle

arr=[]
for i in range(0,1000000): #Assuming you need 1mil entries
    arr.append(b64encode(str(i)))
shuffle(arr)
#Add arr[] to the database

这样您就知道所有字符串都是唯一的，并且随机播放将使顺序（更加）随机。