python 多处理参数:深度复制?

发布于 2024-11-07 01:32:16 字数 431 浏览 5 评论 0原文

from multiprocessing import Process
# c is a container
p = Process(target = f, args = (c,))
p.start()

我假设将 c 的深层副本传递给函数 f 因为浅层副本在新进程的情况下没有任何意义(新进程无权访问来自调用进程的数据)。

但这个深拷贝是如何定义的呢? 副本中有一整套一组注释 .deepcopy() 文档,所有这些注释也适用于此吗? multiprocessing 文档什么也没说......

from multiprocessing import Process
# c is a container
p = Process(target = f, args = (c,))
p.start()

I assume a deep copy of c is passed to function f because shallow copy would make no sense in the case of a new process (the new process doesn't have access to the data from the calling process).

But how is this deep copy defined? There is a whole set of notes in the copy.deepcopy() documentation, do all these notes apply here as well? The multiprocessing documentation says nothing...

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

宫墨修音 2024-11-14 01:32:16

当您创建 Process 实例时,Python 在底层会发出一个 fork()。这将创建一个子进程,其内存空间是其父进程的精确副本——因此分叉时存在的所有内容都会被复制

在 Linux 上,这是通过“写时复制”来提高效率的。从 fork 手册页

fork() 创建一个子进程
仅与父进程不同
在它的 PID 和 PPID 中,事实上
资源利用率设置为
0. 文件锁和挂起信号不被继承。

Linux下实现了fork()
使用写时复制页面,所以唯一的
它所招致的惩罚是时间和
复制所需的内存
父级的页表,并创建一个
孩子独特的任务结构。

When you create a Process instance, under the hood Python issues a fork(). This creates a child process whose memory space is an exact copy of its parent -- so everything existing at the time of the fork is copied.

On Linux this is made efficient through "copy-on-write". From the fork man page:

fork() creates a child process that
differs from the parent process only
in its PID and PPID, and in the fact
that resource utilizations are set to
0. File locks and pending signals are not inherited.

Under Linux, fork() is implemented
using copy-on-write pages, so the only
penalty that it incurs is the time and
memory required to duplicate the
parent's page tables, and to create a
unique task structure for the child.

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文