使用 pickle 转储 gtk.ListStore 的子类

Question

我正在尝试使用 pickle 转储自定义类。该类是 gtk.ListStore 的子类，因为这样可以更轻松地存储特定数据，然后使用 gtk 显示它。这可以复制，如下所示。

import gtk
import pickle
import os

class foo(gtk.ListStore):
    pass

if __name__=='__main__':
    x = foo(str)
    with open(os.path.expandvars('%userprofile%\\temp.txt'),'w') as f:
        pickle.dump(x,f)

我尝试过的解决方案是在我的类中添加一个 __getstate__ 函数。据我了解文档，这应该优先用于pickle，所以它不再尝试序列化 ListStore，但它无法做到这一点。但是，当我尝试腌制我的对象时，我仍然从 pickle.dump 收到相同的错误。该错误可以按如下方式重现。

import gtk
import pickle
import os

class foo(gtk.ListStore):
    def __getstate__(self):
        return 'bar'

if __name__=='__main__':
    x = foo(str)
    with open(os.path.expandvars('%userprofile%\\temp.txt'),'w') as f:
        pickle.dump(x,f)

在每种情况下，pickle.dump 都会引发 TypeError，“无法 pickle ListStore 对象”。使用 print 语句，我已经验证了使用 pickle.dump 时 __getstate__ 函数正在运行。我没有从文档中看到任何关于下一步该做什么的提示，所以我有点困惑。有什么建议吗？

Answer 1

通过这种方法，您甚至可以使用 json 而不是 pickle 来达到您的目的。

这是一个快速工作示例，向您展示了pickle“不可picklable类型”（如gtk.ListStore）所需的步骤。本质上，您需要做一些事情：

1. 定义 __reduce__ ，它返回重建实例所需的函数和参数。
2. 确定 ListStore 的列类型。方法 self.get_column_type(0) 返回一个 Gtype，因此您需要将其映射回相应的 Python 类型。我将其作为练习 - 在我的示例中，我采用了一种技巧来从第一行值中获取列类型。
3. 您的 _new_foo 函数将需要重建实例。

示例：

import gtk, os, pickle

def _new_foo(cls, coltypes, rows):
    inst = cls.__new__(cls)
    inst.__init__(*coltypes)
    for row in rows:
        inst.append(row)
    return inst

class foo(gtk.ListStore):

    def __reduce__(self):
        rows = [list(row) for row in self]
        # hack - to be correct you'll really need to use 
        # `self.get_column_type` and map it back to Python's 
        # corresponding type.
        coltypes = [type(c) for c in rows[0]]
        return _new_foo, (self.__class__, coltypes, rows)

x = foo(str, int)
x.append(['foo', 1])
x.append(['bar', 2])

s = pickle.dumps(x)

y = pickle.loads(s)
print list(y[0])
print list(y[1])

输出：

['foo', 1]
['bar', 2]

Answer 2

当您子类化对象时，object.__reduce__ 负责调用__getstate__。看起来，由于这是 gtk.ListStore 的子类，因此 __reduce__ 的默认实现会尝试 pickle 数据以重建 gtk.ListStore 。 > 首先对象，然后调用您的 __getstate__，但由于 gtk.ListStore 无法进行 pickle，因此它拒绝对您的类进行 pickle。如果您尝试实现 __reduce__ 和 __reduce_ex__ 而不是 __getstate__，问题就会消失。

>>> class Foo(gtk.ListStore):
...     def __init__(self, *args):
...             super(Foo, self).__init__(*args)
...             self._args = args
...     def __reduce_ex__(self, proto=None):
...             return type(self), self._args, self.__getstate__()
...     def __getstate__(self):
...             return 'foo'
...     def __setstate__(self, state):
...             print state
... 
>>> x = Foo(str)
>>> pickle.loads(pickle.dumps(x))
foo
<Foo object at 0x18be1e0 (__main__+Foo-v3 at 0x194bd90)>

此外，您可以尝试考虑其他序列化程序，例如 json。在那里，您可以通过自己定义自定义类的序列化方式来完全控制序列化过程。另外，默认情况下，它们不存在 pickle 的安全问题。