multiprocessing

multiprocessing

文章 35 浏览 400

Python:从 multiprocessing.Process 获取回溯

我试图从 multiprocessing.Process 获取回溯对象。 不幸的是,通过管道传递异常信息不起作用,因为无法对回溯对象进行腌制: def foo(pipe_to_parent)…

也只是曾经 2024-11-09 15:54:45 0 0

在启用 cookie 的网站上使用 urlretrieve 的多线程网络抓取工具

我正在尝试编写我的第一个 Python 脚本,经过大量谷歌搜索,我认为我已经完成了。然而,我需要一些帮助才能冲过终点线。 我需要编写一个脚本来登录启…

Bonjour°[大白 2024-11-09 10:21:10 0 0

通过 Python Popen 运行长时间运行的进程

所以,我想如果我能用一些 python 魔法一下子让我的开发环境启动并运行,那就太酷了。各种数据库、网络服务器等。 但是,我尝试过的以下每个变体似乎…

桃扇骨 2024-11-08 22:28:24 1 0

如何在 Python 多处理池中运行清理代码?

我有一些 Python 代码(在 Windows 上),它使用多处理模块来运行工作进程池。每个工作进程都需要在 map_async 方法结束时进行一些清理。 有谁知道该…

诗化ㄋ丶相逢 2024-11-08 13:32:35 0 0

使用 multiprocessing.Managers 构建一个简单的远程调度程序

考虑以下代码: 服务器: import sys from multiprocessing.managers import BaseManager, BaseProxy, Process def baz(aa) : l = [] for i in range(…

苄①跕圉湢 2024-11-08 02:53:03 0 0

多任务、多线程和多处理之间的区别?

Closed. This question needs to be more focused. It is not currently accepting answers. 想要改进这个问题吗?通过编辑这篇文章来更新问题,使其…

三生路 2024-11-07 22:40:18 0 0

python中有两个或多个工作队列

所以我有 2 个主要工作进程,一个应该获取 URL 的内容,另一个应该 会将每个锚链接插入到 postgre 表中。现在我正在跑步 第一个进程有 12 个实例,所…

划一舟意中人 2024-11-07 21:10:58 1 0

将 Python2.6 转换为 Google App Engine 兼容(多处理)

我用 Python 编写了一个使用多处理的小脚本。我曾想过将其作为计划任务在 Google App Engine 上运行,但不幸的是 Google App Engine 不支持多处理。谁…

新一帅帅 2024-11-07 18:03:18 0 0

python 多处理参数:深度复制?

from multiprocessing import Process # c is a container p = Process(target = f, args = (c,)) p.start() 我假设将 c 的深层副本传递给函数 f 因为…

朮生 2024-11-07 01:32:16 0 0

为什么不使用可运行线程的完整列表,而不是仅使用可运行但未运行的线程?

我正在考虑多处理背后的概念,并且我试图找出为什么使用包含所有未运行的可运行线程的就绪列表(而不是列表)的原因。所有可运行的线程的数据结构的头…

凤舞天涯 2024-11-06 07:32:26 0 0

如何使用openurl &多处理同时获取URL不同的数据?

这个循环帮助从网络服务获取一些文本数据: while True: u = urllib2.urlopen('http://url/%d.csv' %inputd) f=open('/folder/%s.csv' $inputd,'a') c…

戏剧牡丹亭 2024-11-06 07:26:38 0 0

多处理队列最大大小限制为 32767

我正在尝试使用多处理编写一个 Python 2.6 (OSX) 程序,并且我想用超过默认值 32767 的项目填充队列。 from multiprocessing import Queue Queue(2**1…

梦忆晨望 2024-11-05 22:41:07 0 0

使用 PyCUDA 进行 Python 多处理

我有一个问题,想要在多个 CUDA 设备上拆分,但我怀疑我当前的系统架构阻碍了我; 我设置的是一个 GPU 类,其中包含在 GPU 上执行操作的函数(这很奇…

要走就滚别墨迹 2024-11-05 12:23:21 0 0

优化这个python日志解析代码

在我的笔记本电脑上,此代码对于 4.2 GB 输入文件的运行时间为 48 秒。输入文件以制表符分隔,每个值都用引号引起来。每个记录都以换行符结尾,例如 '…

追星践月 2024-11-05 01:26:39 2 0

Python 与 MySQL 的多处理

我已经在 Google 上搜索过这个主题很多次,但找不到适合我需求的解决方案:( 我有一个 MySQL 数据库,其中包含一个包含电子邮件地址(10,000+)的表。 …

冷了相思 2024-11-04 16:48:14 0 0
更多

推荐作者

lorenzathorton8

文章 0 评论 0

Zero

文章 0 评论 0

萧瑟寒风

文章 0 评论 0

mylayout

文章 0 评论 0

tkewei

文章 0 评论 0

17818769742

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文