python的pickle文件是跨平台的吗？

Question

我创建了一个我的小 python 脚本。我在 Linux 上保存了 pickle 文件，然后在 Windows 上使用它，然后再次在 Linux 上使用它，但现在该文件在 Linux 上不起作用，但在 Windows 上运行得很好。 是这样，python 是 coss 平台，但 pickle 文件不是。 这个有什么解决办法吗？？？

Answer 1

Python 的 pickle 是完美的跨平台的。

这可能是由于 Windows 和 Linux 之间的 EOL（行尾）差异造成的。确保在写入和读取时以二进制模式打开 pickle 文件，分别使用 open() 的“wb”和“rb”模式。

注意：在不同版本的 Python 之间传递 pickle 可能会导致麻烦，因此请尝试在两个平台上使用相同的版本。

Answer 2

pickle 模块支持多种不同的数据格式。如果您指定特定的 pickle 格式而不是使用默认值 (0)，则可能会遇到跨平台二进制文件问题。您可以通过指定协议 0 来使用纯 ASCII pickle 文件。

Answer 3

也许您没有以二进制模式打开文件？请参阅此 stackoverflow 问题

Answer 4

Pickle 应该是跨平台的，存在版本控制/协议问题，（参见 http://docs.python.org/library/pickle.html#data-stream-format），但一般来说，如果您在 Windows 和 Unix 机器上使用相同版本的 Python，它们应该是可互操作的。

如果您使用 pickle 作为数据传输机制，您可能需要考虑较少实现的特定数据存储格式，例如 json、xml、csv、yaml 等。

Answer 5

您可以使用 json 而不是 pickle。如果它可以保存您的数据，您就知道它是跨平台的。

Answer 6

一个值得尝试的有趣想法是 PyON（Python 对象表示法）。根据我的测试，当前版本似乎至少适用于简单的情况。不过，对于该项目是否是一个好主意，邮件列表上似乎存在一些分歧。

Answer 7

当 Pickle 腌制一个对象时，它会存储用于创建该对象的模块和方法以及提供给该可调用对象的参数。

>>> import pathlib
>>> import pickle
>>> import pickletools
>>> myPath = pickle.dumps(pathlib.Path.home())
>>> pickletools.dis(pickletools.optimize(myPath))

    0: \x80 PROTO      3
    2: c    GLOBAL     'pathlib WindowsPath'
   23: X    BINUNICODE 'C:\\'
   31: X    BINUNICODE 'Users'
   41: X    BINUNICODE '<your_username>'
   59: \x87 TUPLE3
   60: R    REDUCE
   61: .    STOP
highest protocol among opcodes = 2

从概念上讲，unpickle 确实如此：

from pathlib import WindowsPath
return WindowsPath('C:\\', 'Users', '<your_username>')

Windows 和 Linux 之间的几个类和方法在底层是不同的，或者两个系统之间有不同的行为。

• pathlib.Path() 将根据环境创建 WindowsPath 或 PosixPath。
• os.path 在 Windows 上实际上是 ntpath，在 Linux 上是 posixpath。

同样，如果您在系统之间有不同的模块（或不同版本的模块）可访问，或者对象的构造函数发生变化，这将使 pickle 不兼容。

同样，通常您必须从同一个 ma​​in 加载和转储 pickle 文件。如果您运行两个单独的脚本

serialize_a.py：

class A:
    def __init__(self, num):
        self.num = num

if __name__ == "__main__":
    import pickle
    with open('pickle.pkl', 'wb') as f:
        pickle.dump(A(42), f)

import pickle
import serialize_a

if __name__ == "__main__":
    with open('pickle.pkl', 'rb') as f:
        pickle.load(f)

您将收到错误，因为pickle将A存储为__main__，但现在代码需要将其查找为< code>serialize_a.A():

AttributeError: 无法从 ...> 获取