在 python (bsddb) 中使用 Berkeley Db 时出现 DEADLOCK_WRAP 错误

Question

我正在使用 berkdb 来存储大量键值对，但由于某种原因，当我稍后尝试访问某些数据时，我收到此错误：

try:
    key = 'scrape011201-590652'
    contenttext = contentdict[key]
except:
    print the error


<type 'exceptions.KeyError'> 'scrape011201-590652' in 
contenttext = contentdict[key]\n', '  File "/usr/lib64/python2.5/bsddb/__init__.py",
line 223, in __getitem__\n    return _DeadlockWrap(lambda: self.db[key])  #   
self.db[key]\n', 'File "/usr/lib64/python2.5/bsddb/dbutils.py", line 62, in 
DeadlockWrap\n    return function(*_args, **_kwargs)\n', '  File 
"/usr/lib64/python2.5/bsddb/__init__.py", line 223, in <lambda>\n    return 
_DeadlockWrap(lambda: self.db[key])  # self.db[key]\n']

我不确定 DeadlockWrap 是什么，但没有任何其他程序或进程访问berkdb 或写入它（据我所知），所以不确定我们如何会陷入僵局，如果它指的是这一点。我是否有可能尝试快速访问数据？我在循环中调用了这个函数，所以像

for i in hugelist:
    #try to get a value from the berkdb
    #do something with it

我在多个数据集上运行这个函数一样，这个错误只发生在其中一个（最大的一个）上，而不是其他数据集上。

Answer 1

我非常确定 DeadlockWrap 内容与此无关。这只是自动提供带有后退策略的重试的一种方法。换句话说，如果数据库操作失败，它会等待一段时间，然后重试多次，然后最终失败。

您似乎从字典 get 操作中收到 KeyError ，这更可能是由于您使用的密钥实际上并不存在于数据库。

尝试使用类似以下内容的代码：

try:
    key = 'scrape011201-590652'
    if not contentdict.has_key(key):
        print "Urk!, No record for %s"%(key)
    contenttext = contentdict[key]
except:
    print the error

这应该会显示表中是否不存在该记录（通过输出 Urk! 消息）。至于在这种情况下你要做什么，这取决于你的架构。您可能希望返回 None 或空字符串。您可能还想做您现在正在做的事情（引发异常）。

Answer 2

contenttext = contentdict[key] if contentdict.has_key(key) else None