process-pool

process-pool

文章 0 浏览 1

捕获 /重定向ProcessPoolExecutor的所有输出

我正在尝试从 ProcessPoolExecutor 捕获所有输出。 想象一下,您有一个文件 func.py : print("imported") # I do not want this print in subprocess…

逐鹿 2025-02-13 20:15:38 3 0

python多线程(并发期货)重新递归递归结果,如何正确设置多线程?

我将以下Python脚本汇总在一起,该脚本使用多线程执行返回字典的函数(我的实际应用程序是用于加载和解析的 - 但在此处将其简化为字符串操作,以使其…

鹿! 2025-02-11 03:54:01 2 0

使用需要锁定的词典使用多处理

我正在尝试使用Python的多处理库来加快我拥有的一些代码。我有一个词典,其值需要根据循环的结果进行更新。当前的代码看起来像这样: def get_topic_c…

奢华的一滴泪 2025-02-03 03:42:07 3 0

如何从conturrent.futures.processpoolexecutor()的结果中生成数据框?

我的目标 使用多处理来重写循环(同步)以减少计算时间(它在数百万行循环): def get_info(uid): res = requests.get(CallURL+uid, headers={'Conte…

掌心的温暖 2025-02-01 08:55:22 2 0

Windows 上具有固有内存的 ProcessPoolExecuter

我想使用 ProcessPoolExecuter 来解码从生成器获得的消息。 在初始化 ProcessPoolExecuter 之前,我初始化解码所需的字典。 我希望我的子进程复制此字…

成熟稳重的好男人 2025-01-20 08:51:02 5 0

使用带有无限迭代器和停止标准的并发.futures

我正在尝试并行化一个循环,该循环使用无限生成器作为输入来收集一些数据,并在收到一定量的数据时停止。 我的实现是这样的。 class A: def __iter__(…

已下线请稍等 2025-01-17 09:54:30 3 0

大数据集、ProcessPoolExecutor 问题

问题 - ProcessPoolExecutor 没有提高速度。由 tqdm 确认 了解了足够的 Python 知识,可以复制和/或编写一个可以运行的程序。每个文件大约需要 40 秒…

短叹 2025-01-10 22:47:35 5 0
更多

推荐作者

櫻之舞

文章 0 评论 0

弥枳

文章 0 评论 0

m2429

文章 0 评论 0

野却迷人

文章 0 评论 0

我怀念的。

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文